• 제목/요약/키워드: Adaptive video

검색결과 809건 처리시간 0.022초

딥러닝 기반 컨텐츠 적응적 영상 압축 기술 동향 (Survey on Deep learning-based Content-adaptive Video Compression Techniques)

  • 한창우;김홍일;강현구;권형진;임성창;정승원
    • 방송공학회논문지
    • /
    • 제27권4호
    • /
    • pp.527-537
    • /
    • 2022
  • 멀티미디어 컨텐츠의 수요와 공급이 증가함에 따라 전 세계의 인터넷 트래픽이 증가하는 가운데 이를 완화하기 위해 여러 표준화 그룹에서는 더 효율적인 압축 표준을 제정하는데 노력을 기울이고 있다. 이러한 노력 중 압축 표준에 딥러닝 기술을 도입하고자 하는 연구들이 활발히 진행되고 있다. 그러나 딥러닝 기반 압축 기술은 학습 데이터와 특성이 다른 영상을 압축할 때 압축 효율이 저하되는 문제를 갖는다. 이를 해결하기 위해 컨텐츠에 적응적으로 딥러닝 기술을 도입하는 시도들이 있었다. 본 논문에서는 이들을 크게 코덱 정보 사용, 모델 선택, 추가 정보 전송의 세 가지로 나누어 살펴보고자 한다.

가변 참조 구간의 평균 특징값을 이용한 적응적인 장면 전환 검출 기법 (Adaptive Shot Change Detection Technique Using Mean of Feature Value on Variable Reference Block)

  • 김원희;문광석;김종남
    • 융합신호처리학회논문지
    • /
    • 제9권4호
    • /
    • pp.272-279
    • /
    • 2008
  • 장면 전환 검출은 비디오 데이터의 효율적인 관리를 위한 주요 기술로서 다양한 영상에 실제적으로 적용하기 위해서 적응적인 검출 기술이 요구된다. 본 논문에서는 가변 참조 구간의 평균 특징값을 이용한 적응적인 장면 전환 검출 알고리즘을 제안한다. 제안하는 알고리즘은 비디오 프레임에서 추출한 특징값들 중에서 가변 구간 동안의 평균 특징값을 참조하여 적응적 임계값을 정의하고, 특징값과 임계값을 비교하여 장면 전환 유무를 판단한다. 동일한 비디오 데이터를 사용한 실험을 통해서 제안한 방법이 기존의 방법들보다 검출 결과가 최대 15%이상 향상되었음을 확인하였다. 제안한 방법은 여러 가지 특징 추출 방법에 대해서도 좋은 성능을 나타내었으며, 홈캐스트사의 TVUS 모델에서 구현함으로써 하드웨어 성능이 낮은 플랫폼에서 실시간 장면 전환 검출이 가능한 것을 확인하였다. 따라서 제안하는 방법은 휴대용 미디어 장치나 유사 휴대형기기에서 유용하게 사용될 수 있을 것이다.

  • PDF

DASH 환경에서 QoE 향상을 위한 콘텐츠 특성 기반의 비디오 품질 조절 기법 (A Video Quality Control Scheme Based on Content Characteristics for Improving QoE in DASH Environments)

  • 윤기명;정광수
    • 정보과학회 논문지
    • /
    • 제42권8호
    • /
    • pp.1039-1048
    • /
    • 2015
  • 최근 웹 기반의 적응적 스트리밍 서비스인 DASH (Dynamic Adaptive Streaming over HTTP)가 주목 받고 있다. 그러나 기존 DASH 환경에서 네트워크와 버퍼 기반의 품질 조절 기법은 콘텐츠의 VBR (Variable Bit Rate) 특성을 고려하지 않아 세그먼트 처리량의 변화가 크며 이로 인해 잦은 품질 변화, 영상의 끊김과 같은 사용자 체감품질이 저하되는 문제점을 발생시킨다. 본 논문에서는 DASH 환경에서 사용자 체감품질을 향상시키기 위해 C-DASH (Content Characteristics based Dynamic Adaptive Streaming over HTTP) 기법을 제안한다. C-DASH 기법은 세그먼트의 처리량과 버퍼 상태, 그리고 콘텐츠의 세그먼트 크기를 고려하여 끊김 없고 비디오 품질 변화가 적은 품질 조절을 수행한다. 실험 결과를 통해 제안한 기법이 기존 품질 조절 기법들에 비해 사용자 체감품질을 향상시킴을 확인하였다.

Whole Frame Error Concealment with an Adaptive PU-based Motion Vector Extrapolation for HEVC

  • Kim, Seounghwi;Lee, Dongkyu;Oh, Seoung-Jun
    • IEIE Transactions on Smart Processing and Computing
    • /
    • 제4권1호
    • /
    • pp.16-21
    • /
    • 2015
  • Most video services are transmitted in wireless networks. In a network environment, a packet of video is likely to be lost during transmission. For this reason, numerous error concealment (EC) algorithms have been proposed to combat channel errors. On the other hand, most existing algorithms cannot conceal the whole missing frame effectively. To resolve this problem, this paper proposes a new Adaptive Prediction Unit-based Motion Vector Extrapolation (APMVE) algorithm to restore the entire missing frame encoded by High Efficiency Video Coding (HEVC). In each missing HEVC frame, it uses the prediction unit (PU) information of the previous frame to adaptively decide the size of a basic unit for error concealment and to provide a more accurate estimation for the motion vector in that basic unit than can be achieved by any other conventional method. The simulation results showed that it is highly effective and significantly outperforms other existing frame recovery methods in terms of both objective and subjective quality.

Adaptive Rate Control Scheme for Streaming-based Content Sharing Service

  • Lee, Sunghee;Chung, Kwangsue
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제7권4호
    • /
    • pp.784-799
    • /
    • 2013
  • This paper presents an adaptive rate control scheme for streaming-based content sharing service. This scheme delivers multimedia contents from a user device to another device or seamlessly redirects streaming service across heterogeneous user devices. In the proposed scheme, a streaming server adjusts video quality level according to the network and client status. Our scheme is different from other rate control schemes, because the video quality at the server is decided not only based on the available bandwidth, but also based on the device characteristics and bandwidth requirement at the access network. We also propose a bandwidth estimation method to achieve more equitable bandwidth allocations among streaming flows competing for the same narrow link with different Round Trip Times (RTTs). Through the simulation, we prove that our scheme improves the network stability and the quality of streaming service by appropriately adjusting the quality of the video stream. The simulation results also demonstrate the ability of the proposed scheme in ensuring RTT-fairness while remaining throughput efficient.

ATMF를 이용한 영상의 과분할 방지에 관한 연구 (A Study of Resolving the Over Segmentation in Image using ATMF)

  • 박형근
    • 한국컴퓨터산업학회논문지
    • /
    • 제6권5호
    • /
    • pp.735-740
    • /
    • 2005
  • 경사 영상을 사용하는 워터쉐드에서는 영상 내의 잡음이 직접 국부적 최소 점들로 표현되어 영상의 과분할을 초래하게 된다. 특히 분할되어야 할 영역들의 경계에 대한 기울기 크기는 영역 분할의 정확성에 영향을 주어 전체 분할 성능을 좌우할 수 있다. 그러므로 본 논문에서는 기울기 크기를 결정하기 전에 영역들에 대한 경계의 선명도를 보존하면서 잡음을 제거함으로써 영상의 과분할을 줄일 수 있는 ATMF(Adaptive Trimmed Mean Filter)의 적용을 제안하였다.

  • PDF

Detection and Recognition of Illegally Parked Vehicles Based on an Adaptive Gaussian Mixture Model and a Seed Fill Algorithm

  • Sarker, Md. Mostafa Kamal;Weihua, Cai;Song, Moon Kyou
    • Journal of information and communication convergence engineering
    • /
    • 제13권3호
    • /
    • pp.197-204
    • /
    • 2015
  • In this paper, we present an algorithm for the detection of illegally parked vehicles based on a combination of some image processing algorithms. A digital camera is fixed in the illegal parking region to capture the video frames. An adaptive Gaussian mixture model (GMM) is used for background subtraction in a complex environment to identify the regions of moving objects in our test video. Stationary objects are detected by using the pixel-level features in time sequences. A stationary vehicle is detected by using the local features of the object, and thus, information about illegally parked vehicles is successfully obtained. An automatic alarm system can be utilized according to the different regulations of different illegal parking regions. The results of this study obtained using a test video sequence of a real-time traffic scene show that the proposed method is effective.

초고속 전송 매체용 비디오 코딩을 위한 적응적 비트율 제어에 관한 연구 (Adaptive rate control scheme for very low bit rate video coding)

  • 오황석;이흥규;전준현
    • 한국통신학회논문지
    • /
    • 제21권5호
    • /
    • pp.1132-1140
    • /
    • 1996
  • In video coding systems, an effective rate control method is one of the most improtant issues for the good video quality. This paper presents an adaptive rate control scheme based on the buffer fullness, quantization, and buffer utilization for very low bit rate communication lines, such as 16kbit/s, 24bit/s, and so on. The strategy is implemented on H.263, whichis a vide coding algorithm for narrow band telecommunication channels up to 64kbit/s recommended by ITU-T SG15, to show the effectiveness. The simulation result shows that the suggested rate control scheme has better SNR performance and buffer utilization of source coder than those of linear and non-linear[9] buffer control strategies.

  • PDF

VVC의 In-Loop Filter 기술

  • 박도현;윤용욱;김재곤
    • 방송과미디어
    • /
    • 제24권4호
    • /
    • pp.87-101
    • /
    • 2019
  • JVET(Joint Video Experts Team)에서 새로운 비디오 압축 표준으로 진행 중인 VVC(Versatile Video Coding)에서는 HEVC(High Efficiency Video Coding)의 기술을 근간으로 부호화 효율을 높일 수 있는 다양한 새로운 기술들을 채택하고 있다. 인루프 필터(In-Loop Filter)는 복원영상의 화질을 향상시키기 위한 기술로 주관적 화질 개선뿐만 아니라 부호화 효율을 향상시키는 기술로 기존 HEVC의 확장 기술 및 새로운 인루프 필터 기술을 채택하고 있다. 본 고에서는 VVC의 CD에 채택되어 있는 인루프 필터 기술들을 소개한다. 인루프 필터 기술은 HEVC에 채택되어 있는 디블록킹 필터(Deblocking Filter: DF)와 SAO(Sample Adaptive Offset), 새로이 추가된 ALF(Adaptive Loop Filter)의 3가지의 필터와 LMCS(Luma Mapping with Chroma Scaling) 기술을 포함하고 있다. 이들 인루프 필터 기술은 주관적 화질 개선과 부호화 효율을 크게 개선하고 있으며, 2020년 7월 FDIS(Final Draft International Standard) 완료를 앞두고 인루프 필터링의 다양화로 인한 성능과 복잡도를 고려한 간소화 및 병렬처리 등의 고속화에 대한 표준화가 지속적으로 이루어질 전망이다.

Adaptive Video Streaming over HTTP with Dynamic Resource Estimation

  • Thang, Truong Cong;Le, Hung T.;Nguyen, Hoc X.;Pham, Anh T.;Kang, Jung Won;Ro, Yong Man
    • Journal of Communications and Networks
    • /
    • 제15권6호
    • /
    • pp.635-644
    • /
    • 2013
  • Adaptive hypertext transfer protocol (HTTP) streaming has become a new trend to support adaptivity in video delivery. An HTTP streaming client needs to estimate exactly resource availability and resource demand. In this paper, we focus on the most important resource which is bandwidth. A new and general formulation for throughput estimation is presented taking into account previous values of instant throughput and round trip time. Besides, we introduce for the first time the use of bitrate estimation in HTTP streaming. The experiments show that our approach can effectively cope with drastic changes in connection throughput and video bitrate.