• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2005년도 추계종합학술대회
• /
• pp.569-572
• /
• 2005

This paper proposed the design and implementation of a DSP platform for the various multimedia streaming. The DSP platform synchronizes with host PC to configure DSP and to transmit multimedia streaming through PCI. The suggested DSP platform decodes high-capacity video/audio data using the suggested high-speed FIFO, CPLD and memory interface. The buffer control techniques is proposed in other to avoid the under/over-run of the audio/video data during the audio/video decoding. For the DSP platform test, host PC transmits program stream(PS) that consists of the MPEG-2 video MP@ML and 5.1ch AC3 audio data (Coyote.mov file, half hour running time) to DSP platform. The DSP platform plays continuously back the high sound-quality audio and high-definition video at once.

• 인터넷정보학회논문지
• /
• 제16권2호
• /
• pp.1-6
• /
• 2015

본 논문에서는 고품질 멀티미디어 데이터를 IEEE 802.1 Audio Video Bridging 기반의 네트워크를 통해 스마트 자동차와 스마트 홈 및 스마트 공연장에서 실시간으로 송수신할 수 있는 임베디드 플랫폼을 설계를 통해 정밀한 시간 동기화 표준인 IEEE 802.1AS와 QoS 보장을 위한 자원할당 표준인 IEEE 802.1Qat 프로토콜 분석을 통해 성능을 검증한다. 이를 위해 MRP(Multiple Registration Protocol), MMAP(Multicast Address Acquisition Protocol), IEEE 1722, 1722.1 등 AVB의 핵심 Layer-2 프로토콜을 리눅스 운영체제를 기반으로 구현한다. 아울러 상용 AVB 엔드포인트와 연동 실험을 통해 상호 호환성 및 멀티미디어 스트림의 실시간 송수신이 가능함을 보인다.

• ETRI Journal
• /
• 제35권6호
• /
• pp.960-968
• /
• 2013

To implement a cloud game service platform supporting multiple users and devices based on real-time streaming, there are many technical needs, including game screen and sound capturing, audio/video encoding in real time created by a high-performance server-generated game screen, and real-time streaming to client devices, such as low-cost PCs, smart devices, and set-top boxes. We therefore present a game service platform for the running and management of the game screen, as well as running the sound on the server, in which the captured and encoded game screen and sound separately provide client devices through real-time streaming. The proposed platform offers Web-based services that allow game play on smaller end devices without requiring the games to be installed locally.

• 중국연구
• /
• 제79권
• /
• pp.81-100
• /
• 2019

Youtube와 같은 영상의 시대에 역설적으로 오디오북이 급성장하고 있다. 오디오북은 스마트 디바이스 시대에서 디지털 기기와 거리를 두려는 디지털 디톡스(Digital Detox) 경향 등의 복합적인 영향의 결과물이라 할 수 있다. 오디오북의 최대 장점은 영상이나 텍스트와는 달리 일 또는 운전 등을 하면서 '멀티태스킹(mutitasking)'으로 책을 읽을 수 있다는 점이다. 오디오북시장은 이미 해외에서 최근 몇 년간 출판 분야에서 가장 빠르게 성장하는 산업으로 자리잡았다. 한국과 중국에서도 다양한 오디오북 전문 플랫폼이 등장하고 있다. 특히 중국어+한국어 번역 텍스트에 중국어 사운드를 추가할 경우 학생들의 접근성을 파격적으로 강화할 수 있다. 또한 중국어 음성합성 기술을 웹페이지에 적용하고 중국문학 작품 텍스트와 사운드를 동시에 서비스 한다면 그 효과는 극대화될 것이다. 특히 4차산업혁명시대 지능화된 음성합성은 낭독자의 자연음을 활용하여 음성엔진을 개발함으로써, 기계적인 음성합성의 한계를 극복할 수 있는 대안이 될 것이다.

• 인터넷정보학회논문지
• /
• 제17권4호
• /
• pp.11-17
• /
• 2016

본 논문에서는 버스안전을 위한 다중 HD 카메라 기반의 IP통신망 AVB(Audio Video Bridge) 이더넷 케이블을 연동한 FPGA(Xilinx Zynq702)로 멀티뷰어 플랫폼을 제안하였다. 이러한 AVB(IEEE802.1BA) 시스템은 차량용 네트워크에서 다중 HD 비디오와 오디오 디지털 신호의 실시간 전송이 가능하다. 제안한 멀티뷰어 플랫폼은 기존 이더넷 케이블 1Gbps전송과 2-선 100Mbps 스트림 전송방식을 통해 4개의 초광각 HD 카메라로 부터 H.264 비디오 신호를 다중화하기 위한 지연속도의 개선을 위해 FPGA로 설계하였다. 아울러, 차량용 HD 동영상 전송망에서 시간지연을 최소화하기 위한 AVB 플랫폼은 Zynq 702기반의 H.264 AVC 저지연 코덱의 설계 방안을 제안하였다. 이러한 H.264 AVC 코덱의 부호화/복호화 결과확인을 위해 JM 모델을 참조한 PSNR(Peak Signal-to-noise-ratio)을 분석하였다. 설계한 Zynq 702기반의 H.264 AVC CODEC은 다중 HD 카메라의 다중뷰어 동영상 손실 압축에서 화질 손실에 대한 PSNR은 이론 값과 유사한 HW 결과 값을 확인하였다. 이로서 제안한 AVB기반의 다중 HD 카메라 연동형 멀티뷰어 플랫폼은 H.264 AVC CODEC의 저지연 특성이 차량용 특성에 만족함으로서 버스안전을 위한 주변의 오디오와 비디오 영상감시가 가능할 것이다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2011년도 춘계학술발표대회
• /
• pp.46-49
• /
• 2011

This paper is to implement MoIP platform to send and receive video and audio at the same time by using high-performance Dual Core Processor. Even if Wall-Pad key component of a home network system is released by using embedded processors, it's lacking of performance in terms of multimedia processing and feature of video telephony through which video and voice are exchanged simultaneously. The main reason could be that embedded processors currently being used do not provide enough performance to support both MoIP call features and various home network features simultaneously. In order to solve these problems, Dual processor could be used, but in the other hands it brings another disadvantage of high cost. Therefore, this study is to solve the home automation features and video telephony features by using Dual Core Processor based on ARM 11 Processor and implement the MoIP Wall-Pad which can reduce the board design costs and component costs, and improve performance. The platform designed and implemented in this paper verified performance of MoIP to exchange the video and voice at the same time under the situation of Ethernet network.

• 한국통신학회논문지
• /
• 제42권4호
• /
• pp.892-898
• /
• 2017

본 논문은 차량 내 AVN(Audio Video Navigation)에서 차량정보 분석과 제스처 인식이 가능한 소프트웨어 구조를 설계하고 구현 방법을 서술한다. 설계된 소프트웨어는 차량정보 분석을 위해 CAN(Controller Area Network) 통신 데이터 분석 모듈을 구현하여 차량의 주행 상태를 분석했다. AVN 소프트웨어는 분석된 정보를 웨어러블 디바이스의 제스처 정보와 융합토록 했다. 도출된 융합정보는 운전자의 명령 수행 단계로 매칭하고 서비스를 지원하는데 사용됐다. 설계된 AVN 소프트웨어는 기성 제품과 유사한 환경의 HW 플랫폼 상에 구현되어 차량 주행 상황과 동일하게 모사된 상황에서의 차량정보분석, 제스처 인식 수행 등의 기능을 지원함을 확인했다.

• 한국정보과학회논문지:정보통신
• /
• 제30권2호
• /
• pp.260-269
• /
• 2003

기존의 분산 객체 미들웨어가 제공하는 RPC(Remote Procedure Call) 기반의 메시지전송 방식은 내부 오버헤드로 인해 실시간성을 요구하는 스트림 데이타의 전송에는 부적합하다. 그래서 OMG (Object Management Group)에서는 분산 환경에서도 실시간 스트리밍을 지원 할 수 있는 새로운 AV (Audio and Video) 스트림 서비스 참조 모델을 제안하였다. 그러나 이 모델은 오직 참조 모델이기 때문에 실제 구현 방법에 따라 재 정의해야 할 부분이 많이 남아 있다. 특히 실제 네트워크 환경을 고려한 혼잡 제어와 같은 기능이 없기 때문에 스트림 전송의 QoS를 제어할 수가 없다. 이러한 고려는 최근 연구되어 지고 있는 다양한 스트림 전송 플랫폼들이 가져야 할 고급 기능으로 전체 네트워크의 효율 증가를 위해서도 반드시 필요하다. 본 논문에서는 분산 환경의 장점을 최대한 부각시킬 수 있는 OMG의 스트림 서비스 참조 모델을 재 정의한 스트림 전송 플랫폼을 설계하고 구현하였다. 제안한 플랫폼은 스트림 전송을 위한 새로운 TCP-Friendly 프로토콜인 SRTP(Smart RTP)를 하부 구성 요소로 제공하며 이를 이용하여 본 플랫폼을 통한 스트리밍 응용들의 효율을 향상시켰다.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2005년도 추계종합학술대회
• /
• pp.945-948
• /
• 2005

In wireless and handheld platforms area, performance, power and cost are key metrics for product success. This is driving increasing levels of on-chip integration in state-of-the-art application processors. The purpose of this project is to optimize and design the energy-efficient embedded system that properly displays video and audio in real time. The requirements are for the media player to be capable of decoding real-time streaming video and audio with the least possible energy consumption for a variety of different clips at different resolutions. We implemented this Linux based multimedia player on Intel's PXA27x platform.

• 전자공학회논문지
• /
• 제50권6호
• /
• pp.99-104
• /
• 2013

최근 주목받는 스마트 폰, 스마트 TV 등 스마트 전자기기들은 전통기기의 기능과 컴퓨터를 결합하는 공통점을 갖고 있다. 단순히 프로세서가 내장되어 연산만 수행하는 것이 아니라 OS(Operating System)가 포함되고 사용자가 개인 용도에 따라 새로운 기능을 추가할 수 있고 유무선 통신으로 인터넷 또는 PC와 연결하여 통신할 수 있는 개장된 멀티미디어 SoC 플랫폼이 필요하다. 본 논문에서는 Core-A 프로세서와 AMBA 버스 기반으로 영상, 음성 또는 각종 통신 형태를 지원하는 다기능 SoC 플랫폼을 설계하여 FPGA로 구현과 검증을 하였다. SoC 플랫폼의 전체 성능을 검증하기 위해 JPEG 디코딩 알고리즘과 ADPCM 인코딩 디코딩 알고리즘을 실행하고 실행 결과를 모니터 또는 스피커로 출력하여 검증했다.