• 한국정보처리학회논문지
• /
• 제4권10호
• /
• pp.2581-2595
• /
• 1997

본 논문에서는 주문형 비디오 서버가 필요로 하는 운영체제의 실시간 스케쥴링 기능을 분석 및 구현하였다. 실시간 스케쥴링 요구 조건은 비디오 데이타 전달 경로에 대한 모델 분석을 통하여 수집되었다. 특히, 병목 현상을 일으키는 하부 시스템이 전체 시스템의 실시간 스케쥴링에 미치는 영향을 분석함으로써 비디오 데이타 처리에 적합한 실시간 스케쥴러 및 프리미티브를 구현하였다. 성능 측정에서는 구현된 실시간 스케쥴러의 보장성을 실험하였다. 측정된 데이타는 프로세스가 가진 대부분의 시간 제약 조건이 만족됨을 보였다. 그러나 인터럽터 방식의 네트워크 프로토콜 처리는 실시간 스케쥴링의 가장 큰 장애 요소이다. 또한, 프로세스 수행 시간 간격을 측정함으로써 비실시간 스케쥴러와 실시간 스케쥴러의 차이점을 비교하였다. 측정된 결과에 의하면 비실시간 스케쥴러을 사용하면 프로세스에 할당되는 프로세서 시간을 예측하기 어렵기 때문에 효율적인 비디오 서비스를 위해서는 반드시 실시간 스케쥴러가 사용되어야 함을 보였다.

• Journal of Information Processing Systems
• /
• 제19권6호
• /
• pp.817-829
• /
• 2023

Variable wireless channel is a big challenge for real-time video applications, and the rate adaptation of realtime video streaming becomes a hot topic. Intra-video coding is important for high-quality video communication and industrial video applications. In this paper, we proposed a novel adaptive scheme for real-time video transmission with intra-only coding over a wireless network. The key idea of this scheme is to estimate the instantaneous remaining capacity of the network to adjust the quality of the next several video frames, which not only can keep low queuing delay and ensure video quality, but also can respond to bandwidth changes quickly. We compare our scheme with three different schemes in the video transmission system. The experimental results show that our scheme has higher bandwidth utilization and faster bandwidth change response, while maintaining low queuing delay.

• 조명전기설비학회논문지
• /
• 제22권7호
• /
• pp.37-42
• /
• 2008

In this paper, a real-time multiview video coding system using fast disparity estimation is proposed. In the multiview encoder, adaptive disparity-motion estimation (DME) for an effective 3-dimensional (3D) processing are proposed. That is, by adaptively predicting the mutual correlation between stereo images in the key-frame using the proposed algorithm, the bandwidth of stereo input images can be compressed to the level of a conventional 2D image and a predicted image also can be effectively reconstructed using a reference image and adaptive disparity vectors. Also, in multiview decoder, intermediate view reconstruction (IVR) using adaptive disparity search algorithm (DSA) for real-time multiview video processing is proposed. The proposed IVR can reduce a processing time of disparity estimation by selecting adaptively disparity search range. Accordingly, the proposed multiview video coding system is able to increase the efficiency of the coding rate and improve the resolution.

• 한국멀티미디어학회논문지
• /
• 제25권4호
• /
• pp.583-599
• /
• 2022

Although the object detection accuracy with a single image has been significantly improved with the advance of deep learning techniques, the detection accuracy for pig monitoring is challenged by occlusion problems due to a complex structure of a pig room such as food facility. These detection difficulties with a single image can be mitigated by using a video data. In this research, we propose a method in pig detection for video monitoring environment with a static camera. That is, by using both image processing and deep learning techniques, we can recognize a complex structure of a pig room and this information of the pig room can be utilized for improving the detection accuracy of pigs in the monitored pig room. Furthermore, we reduce the execution time overhead by applying a pruning technique for real-time video monitoring on an embedded board. Based on the experiment results with a video data set obtained from a commercial pig farm, we confirmed that the pigs could be detected more accurately in real-time, even on an embedded board.

• 융합신호처리학회논문지
• /
• 제10권2호
• /
• pp.100-105
• /
• 2009

방송용 디지털 콘텐츠의 저작권 보호를 위한 워터마킹은 실시간 처리가 가능하도록 만들어져야한다. 본 논문에서는 HD/SD 디지털 방송의 저작권 보호를 위한 실시간 비디오 워터마킹 칩 및 시스템을 제안한다. 제안한 칩은 ALTERA사의 STRATIX칩을 사용하여 하드웨어에 최적화된 워터마크 삽입 알고리듬을 이용하여 구현하였고, HD/SD 비디오 신호처리를 위한 시스템은 GENNUM사의 GS1560A와 GS1532를 사용하여 구현하였다. 구현 결과 원본 비디오와 워터마크 삽입된 비디오의 주관적인 화질에 대한 측정을 하였을 경우 워터마킹 때문에 약간의 인위적 화질 열화가 나타났다. 삽입된 워터마크는 A/D 변환과 같은 자연적인 비디오 공격 그리고 MPEG 압축 공격과 같은 강인성 실험 후에도 모두 추출되었다. 구현된 워터마킹 하드웨어 시스템은 고화질의 실시간 처리가 필요한 저작권 보호 시스템이 적용되는 방송국, 영화제작 환경에서 유용하게 사용될 것이다.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2001년도 하계종합학술대회 논문집(2)
• /
• pp.373-376
• /
• 2001

This paper has been studied a real-time video frame data processing control that used the linear systolic array for motion estimation. The proposed data control processing provides to the input data into the multiple processor array unit(MPAU) from search area and reference block data. The proposed data control architecture has based on two slice band for input data processing. And it has no required external control logic blocks for input data as like reference block or search area data.

• 한국멀티미디어학회논문지
• /
• 제24권4호
• /
• pp.538-549
• /
• 2021

In this paper, we introduce a technique for 360-degree panoramic video streaming with multiple virtual cameras in real-time. The proposed technique consists of generating 360-degree panoramic video data by ORB feature point detection, texture transformation, panoramic video data compression, and RTSP-based video streaming transmission. Especially, the generating process of 360-degree panoramic video data and texture transformation are accelerated by CUDA for complex processing such as camera calibration, stitching, blending, encoding. Our experiment evaluated the frames per second (fps) of the transmitted 360-degree panoramic video. Experimental results verified that our technique takes at least 30fps at 4K output resolution, which indicates that it can both generates and transmits 360-degree panoramic video data in real time.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제15권7호
• /
• pp.2513-2530
• /
• 2021

With the fast development of information and communication technologies, video streaming services and applications are increasing rapidly. However, the network condition is volatile. In order to provide users with better quality of service, it is necessary to develop an accurate and low-complexity model for Quality of Experience (QoE) prediction of time-varying video. Memory effects refer to the psychological influence factor of historical experience, which can be taken into account to improve the accuracy of QoE evaluation. In this paper, we design subjective experiments to explore the impact of Short-Term Memory (STM) on QoE. The experimental results show that the user's real-time QoE is influenced by the duration of previous viewing experience and the expectations generated by STM. Furthermore, we propose analytical models to determine the relationship between intrinsic video quality, expectation and real-time QoE. The proposed models have better performance for real-time QoE prediction when the video is transmitted in a fluctuate network. The models are capable of providing more accurate guidance for improving the quality of video streaming services.

• 방송공학회논문지
• /
• 제6권2호
• /
• pp.169-176
• /
• 2001

기존의 비디오 워터마킹 알고리즘은 실시간 처리가 대부분 불가능하였는데, 가장 큰 이유는 압축에 강인한 알고리즘을 개발하 기 위해 삽입과 추출과정이 계산량이 많은 주파수 공간에서 이루어지기 때문이다 보통 기존의 방법들은 비디오 압축처리 중에 워터마크를 삽입하는 과정을 첨가하여 실시간 처리를 지원토록 해왔다. 그러나, 본 논문에서는 공간영역과 주파수영역에서 모두 처리하는 과정을 거치도록 하여 실시간 처리가 가능한 새로운 알고리즘을 제안하였다. 제안된 방법은 먼저 워터마크를 퓨리에 주파수 영역에서 변환하여 생성한 후, 이를 공간영역으로 역변환 한 후. 공간 영역에서 비디오에 직접 삽입한다. 이 과정은 계산량이 딴이 소비되는 주파수 영역에서의 작업을 따로 실행하지 않아 실시간 처리가 가능해진다. 또한 이 방법은 비디오 스트림에도 적용 가능하며 MPEG압축과 기하학적 변화등의 다양한 공격에도 매우 강인한 결과를 보여준다.

• 융합신호처리학회논문지
• /
• 제14권1호
• /
• pp.62-69
• /
• 2013

본 논문은 멀티미디어 광 네트워크인 MOST를 통해 차량의 카메라에서 입력된 영상을 실시간으로 전송하여 디스플레이 할 수 있는 MOST 기반 영상 송 수신 시스템을 제안하였다. 기존의 차량에서는 카메라를 아날로그 형태로 연결하여 영상을 전송하였으나, 차량에 장착되는 카메라의 수가 점점 증가함에 따라 네트워크로 연결하여 영상을 전송하는 것을 요구하게 되었다. 본 논문에서는 실시간 영상 전송을 위해 DSP를 이용하여 MPEG 인코딩과 디코딩을 하였다. 그리고 DSP와 MOST 네트워크 컨트롤러 사이의 스트림 데이터 전송은 MediaLB를 이용하였다. 이때 DSP가 MediaLB와의 연결을 지원하지 않기 때문에 스트림 데이터를 직접 주고 받을 수 없다. 따라서 FPGA를 사용하여 MediaLB를 통해 전송되는 스트림 데이터를 DSP에 전달하도록 하였다. MediaLB는 MOST 네트워크에 대한 하드웨어 및 소프트웨어 응용 프로그램 개발을 쉽게 할 수 있도록 해주고 모든 MOST 네트워크의 데이터 전송방법을 지원한다 본 논문에서 제안된 시스템으로 실시간 영상 전송을 테스트 한 결과 정상적으로 동작하는 것을 확인하였다.