• Journal of Broadcast Engineering
• /
• v.24 no.6
• /
• pp.1076-1084
• /
• 2019

In this paper, we introduced a system that extracts metadata by recognizing characters and objects in media using deep learning technology. In the field of broadcasting, multimedia contents such as video, audio, image, and text have been converted to digital contents for a long time, but the unconverted resources still remain vast. Building media archives requires a lot of manual work, which is time consuming and costly. Therefore, by implementing a deep learning-based metadata generation system, it is possible to save time and cost in constructing media archives. The whole system consists of four elements: training data generation module, object recognition module, character recognition module, and API server. The deep learning network module and the face recognition module are implemented to recognize characters and objects from the media and describe them as metadata. The training data generation module was designed separately to facilitate the construction of data for training neural network, and the functions of face recognition and object recognition were configured as an API server. We trained the two neural-networks using 1500 persons and 80 kinds of object data and confirmed that the accuracy is 98% in the character test data and 42% in the object data.

• Proceedings of the Korean Information Science Society Conference
• /
• 2010.11a
• /
• pp.27-31
• /
• 2010

본 논문에서는 하이퍼그래프의 고유벡터를 척도로 하여 fMRI기반 Brain Network를 분석하여 중요한 허브노드를 찾는 방법론을 제시한다. 이 방법을 비디오게임을 수행하면서 촬영한 기능적 자기뇌영상(fMRI) 데이터인 PBAIC 2007 데이터셋에 대하여 그 유용성을 검증하였다. 이 데이터는 각 20분씩 세 세션을 촬영한 것이며 처음 두 세션에는 13가지의 감정 항목의 평가치가 각 스캔마다 주어진다. 한 피험자의 첫번째 세션 데이터로부터 13가지 감정 항목에 대하여 상관관계가 높은 각각의 복셀(voxel)들을 추출하였다. 이 13가지의 복셀들의 집합들을 각각 하이퍼에지로 보고 하이퍼그래프를 구성하였다. 하이퍼그래프로부 터 인접 행렬(adjacency matrix)를 구성한 후 고유치(eigenvalue)와 고유벡터(eigenvector)를 구하였다. 여기서 고유치가 가장 큰 고유벡터의 원소들은 각 복셀들의 중앙성(centrality), 즉 중요성을 나타내며 이로부터 감정과 관련된 중요한 허브 복셀들과 그들의 국소적 집합인 모듈을 찾았다. 모듈들은 감정 및 작업기억(working memory)과 관련된 뇌 영역들의 클러스터(cluster)로 추정된다.

• Journal of the Korea Society of Computer and Information
• /
• v.7 no.4
• /
• pp.8-15
• /
• 2002

This Paper proposes designing and implementing the database system storing the medical images. This system collects the medical image when doctors operate and diagnose the patients using the endoscope in the orthopedics, then stores the medical image data to database. Therefore. system avoids duplicated medical data, retrieves and updates the medical data effectively. The medical image data can be shared to the multiple users and application programs. This system consists of the five components. that is, the input module acquiring the medical image from the endoscope. the modulo storing the medical image. the database design and implementation storms the patient's disease history and the medical image data, user friendly interface design and implementation, and the simple data retrieval engine. The features of the system are followed. The image catcher program using DirectShow is portable any image catcher board And because the image catcher algorithm is implemented as a public module, The throughput can be increased during the development of video and audio contents on internet.

• Journal of KIISE:Computing Practices and Letters
• /
• v.13 no.3
• /
• pp.165-178
• /
• 2007

The recent progress in multimedia signal processing and transmission technologies has contributed to the extensive use of multimedia devices to watch sports games with small LCD panel. However, the most of video sequences are captured for normal viewing on standard TV or HDTV, for cost reasons, merely resized and delivered without additional editing. This may give the small-display-viewers uncomfortable experiences in understanding what is happening in a scene. For instance, in a soccer video sequence taken by a long-shot camera techniques, the tiny objects (e.g., soccer ball and players) may not be clearly viewed on the small LCD panel. Moreover, it is also difficult to recognize the contents of the scorebox which contains the elapsed time and scores. This renuires intelligent display technique to provide small-display-viewers with better experience. To this end, one of the key technologies is to determine region of interest (ROI) and display the magnified ROI on the screen, where ROI is a part of the scene that viewers pay more attention to than other regions. Examples include a region surrounding a ball in long-shot and a scorebox located in the comer of each frame. In this paper, we propose a scheme for raising viewing experiences of multimedia mobile device users. Instead of taking generic approaches utilizing visually salient features for extraction of ROI in a scene, we take domain-specific approach to exploit unique attributes of the soccer video. The proposed scheme consists of two modules: ROI determination and scorebox extraction. The experimental results show that the proposed scheme offers useful tools for intelligent video display on multimedia mobile devices.

• The Journal of Korean Institute of Electromagnetic Engineering and Science
• /
• v.27 no.5
• /
• pp.445-453
• /
• 2016

This paper presents the implementation and design of the 1T-1R wireless HD video streaming systems over 28 GHz mmWave frequency using 3GPP LTE-TDD standard on NI USRP RIO SDR platform. The baseband of the system uses USRP RIO that are stored in Xilinx Kintex-7 chip to implement LTE-TDD transceiver modem, the signal that are transceived from USRP RIO up or down converts to 28 GHz by using self-designed 28 GHz RF transceiver modules and it is finally communicated HD video data through self-designed $4{\times}8$ sub array antennas. It is that communication method between USRP RIO and Host PC use PCI express ${\times}4$ to minimize delay of data to transmit and receive. The implemented system show high error vector magnitude performance above 25.85 dBc and to transceive HD video in experiment environment anywhere.

• Journal of the Korea Institute of Information and Communication Engineering
• /
• v.14 no.3
• /
• pp.621-627
• /
• 2010

This paper proposes an efficient architecture of Inter layer up-sampling in decoder for SVC(scalable video coding). A register bank for horizontal and vertical up-sampling and interpolation units are designed, by introducing the proposed architecture, 41% memory bandwidth is reduced compared to JSVM. For real-time operation for HD 6 layer decoder having CIF, SD, HD resolution for CGS layer, the hardware is designed to operate at 127MHz. The gate count is about 3000.

• Proceedings of the Korean Information Science Society Conference
• /
• 2006.06d
• /
• pp.37-39
• /
• 2006

최근 지상파 DMB 방송이 실시됨에 따라 이를 이용한 교통여행정보(Traffic and Travel Information, TTI)제공에 대한 관심이 증대되고 있고, 현재 DMB 방송을 통한 TPEG(Transport Protocol Experts Group) TTI 데이터 시범 서비스 실시 중에 있다. 본 논문에서는 DMB 방송의 수신 뿐만 아니라 TPEG TTI 데이터를 수신하고 이를 기존의 네비게이션 서비스와 연동하여 처리할 수 있는 DMB 방송 및 TPEG 수신 소프트웨어 디코더를 개발한다. 개발되는 디코더는 DMB가 제공하는 오디오 및 비디오 방송을 수신하면서 TPEG TTI 데이터를 GPS/GIS 모듈과 연동 처리하여 사용자에게 동적인 위치기반 네비게이션 서비스를 제공한다.

• Proceedings of the Korea Multimedia Society Conference
• /
• 2002.11b
• /
• pp.373-376
• /
• 2002

가정 내 정보 가전 기기들의 수효가 늘어 가고, 초고속 인터넷 서비스가 일반 가정으로 보급되는 등 가정 내의 정보 통신 환경이 변하고 있다. 이 가정 내 정보 가전 환경을 통합 관리하면서 외부 통신망과의 연계를 담당하는 기기로서 홈 서버가 이용되어 진다. 또한 코덱 기술의 발전으로 인터넷을 통해 원격지로 영상을 송수신할 수 있게 되었다. 본 논문에서는 이러한 정보 가전 환경에서 홈 서버를 기반 시스템으로 한 영상 감시 시스템의 구현에 대해 기술하였다. 본 시스템은 홈 서버 시스템에 X.10 프로토콜을 이용하여 카메라와 같은 디바이스를 제어하도록 하였으며, 통화 호출에 사용하는 프로토콜로는 IETF(Internet Engineering Task Force)에서 권고한 SIP(Session Initiation Protocol) 영상 회의 프로토콜을 기반으로 하였다. 본 영상 감시 시스템은 SIP의 User Agent를 홈 서버에 구현하여 비디오 코덱 등을 연결하였고 SIP의 메시지와 X.10 디바이스 콘트롤을 연동하는 모듈을 추가하여 카메라 선택 등의 디바이스 제어를 하는 동시에 집 외부에서 내부의 상황을 영상으로 모니터링할 수 있도록 하였다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2001.04a
• /
• pp.568-570
• /
• 2001

네트워크 하드웨어와 인터넷 서비스 관련기술의 발전과 더불어 인터넷에서는 매일매일 상상하지 못했던 새로운 서비스가 제공되고 있다. 새롭게 제공되는 대부분의 서비스는 이미지, 오디오, 비디오와 같은 멀티미디어 컨텐트를 포함하고 있다. 현재 제공되고 있는 대부분의 검색서비스는 멀티미디어 컨텐트를 브라우징하거나 검색하는데 부적절하거나 비효율적이다. 따라서 멀티미디어 켄텐트를 효율적으로 검색하고 브라우징하는 새로운 검색서비스가 필요하게 되었다. 본 논문에서는 한국통신 멀티미디어연구소에서 개발한 멀티미디어 검색 시스템인 미디어웨이즈[4]를 기반으로 하여 현재 서비스중인 한미르의 멀티미디어 검색 서비스에 대한 전반적인 시스템 구성을 살펴보겠다. 특히 빠르고 정확한 검색을 위해 데이터관리의 측면에서 모듈로 살펴보겠다.

• Proceedings of the Korea Multimedia Society Conference
• /
• 2012.05a
• /
• pp.93-96
• /
• 2012

본 논문에서는 유선기반 DOS(Disk Operating System) 제어의 다양한 단점들을 극복하기 위해 무선기반의 도스 원격제어 시스템을 제안한다. 제안한 시스템은 비디오 전송기, 가상 네트워크 드라이버, 무선 키보드 모듈로 구성되며 도스와 윈도우즈 컴퓨터간의 중계기 역할을 수행한다. 무선 랜 환경(802.11n)에서 성능을 측정한 결과 약 15Mbps 통신환경에서 영상의 경우 초당 10 ~ 15 프레임을 전송하고, 네트워크 드라이버의 연결속도는 약 8Mbps이며, 키보드 입력의 경우 실시간 처리가 가능하다. 따라서 본 논문에서 제안한 시스템은 DOS기반 어플리케이션의 원격제어 솔루션으로 매우 적합하다 할 수 있다.