• 방송공학회논문지
• /
• 제27권7호
• /
• pp.1021-1033
• /
• 2022

After the Versatile Video Coding (VVC)/H.266 standard was completed, the Joint Video Exploration Team (JVET) began to investigate new technologies that could significantly increase coding gain for the next generation video coding standard. One direction is to investigate signal processing based tools, while the other is to investigate Neural Network based technology. Neural Network based Video Coding (NNVC) has not been studied previously, and this is the first trial of such an approach in the standard group. After two years of research, JVET produced the first common software called Neural Compression Software (NCS) with two NN-based in-loop filtering tools at the 27th meeting and began to maintain NN-based technologies for the common experiment. The coding performances of the two filters in NCS-1.0 are shown to be 8.71% and 9.44% on average in a random access scenario, respectively. All the material related to NCS can be found in the repository of the JVET. In this paper, we provide a brief overview and review of the NNVC activity studied in JVET in order to provide trend and insight for the new direction of video coding standard.

• 전자공학회논문지
• /
• 제49권9호
• /
• pp.92-103
• /
• 2012

본 논문에서는 다양한 재생환경에 대해 적응적으로 홀로그램 비디오를 서비스하기 위한 처리 기술에 대해서 논의하고, 새로운 알고리즘을 제안한다. 제안하는 알고리즘은 홀로그램의 생성 및 획득 방식에 따라서 해상도 스케일러블 코딩(hologram-based resolutional scalable coding, HRS) 방식과 광원 기반의 SNR 스케일러블 코딩(light source-based SNR scalable coding, LSS) 방식으로 구성된다. HRS는 이미 획득된 홀로그램에 대한 스케일러블 코딩 기법이고, LSS는 홀로그램을 만들기 이전의 광원에 대해 적용이 가능한 코딩 기법이다. $1,024{\times}1,024$ 크기의 홀로그램에 대해서 HRS는 1:1에서 100:1의 압축률을 가지면서 8 단계의 적응적인 서비스가 가능하도록 하였다. LSS는 무손실 압축 기법을 사용하면서 광원 정보의 분리개수에 따른 서비스가 가능하도록 하였다. 제안한 방식을 통해서 다양한 해상도를 갖는 디스플레이, 수신단의 연산 능력, 그리고 네트워크의 대역폭에 따라 적응적으로 홀로그래픽 비디오를 서비스할 수 있다는 것을 보였다.

• 한국정보통신학회:학술대회논문집
• /
• 한국정보통신학회 2013년도 춘계학술대회
• /
• pp.345-348
• /
• 2013

본 논문은 온칩 버스 데이터의 압축 전송을 위한 방법을 제안한다. 영상 해상도의 가파른 증가와 함께 멀티미디어 프로세서의 온칩 버스의 데이터 트래픽은 빠르게 증가하고 있어 많은 SoC 칩들이 성능 저하를 경험하고 있다. IP 코어는 bus grant 신호를 얻는 데 많은 시간이 소요되는데 본 논문은 이 시간을 활용하여 간단한 버스 데이터 압축 전송을 하는 방법을 소개한다. 그 방법으로 하드웨어 구현하여 VC-1 디코더 프로세서에 적용함으로써 평균 매크로 블록 처리 시간을 각각 sd 영상은 13.6%, hd 영상은 13.1%까지 줄일 수 있음을 확인하였다.

• IEIE Transactions on Smart Processing and Computing
• /
• 제2권2호
• /
• pp.86-96
• /
• 2013

VP8, an open web media video format, has recently attractedmuch attention, particularly from major web browser companies, as a video codec for HTML5 on internet due to its good coding efficiency and royalty-free policy. Compared to other video compression schemes such as H.264/AVC, it has several distinctive coding tools that help to ensure good coding efficiency and low decoding complexity. In this paper, we investigate its coding techniques and analyze its rate-distortion (R-D) coding performance as compared to that of H.264/AVC.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2017년도 하계학술대회
• /
• pp.63-65
• /
• 2017

본 논문에서는 동영상의 조작 시 발생하는 High Efficiency Video Codec (HEVC) 부호화 패턴의 변화를 감지하여 동영상의 조작 여부를 검출하는 기법에 대하여 소개한다. 동영상의 일부가 삭제되고 재 압축될 경우, 삭제 이후 여러가지 부호화 정보의 패턴 변화가 발생하게 됨을 특징정보로 하여 기계학습 기반의 분류 알고리즘을 이용해 조작유무를 검출한다. 실험 결과, 제안한 방식이 동영상 조작 검출을 효과적으로 수행하는 것을 확인하였다.

• 한국멀티미디어학회논문지
• /
• 제21권10호
• /
• pp.1131-1141
• /
• 2018

Motion Estimation which is used to reduce the redundant data plays an important role in video compressions. However, it requires huge computational complexity of the encoder part. And therefore many fast motion estimation methods has been developed to reduce complexity. Multi-view video is obtained by using many cameras at different positions and its complexity increases in proportion to the number of cameras. In this paper, we proposed a fast motion estimation method for multi-view video. The proposed method predicts a search start point by using correlated candidate vectors of the current block. According to the motion size of the start search point, a search start pattern of the current block is decided adaptively. The proposed method proves to be about 2 ~ 5 times faster than existing methods while maintaining similar image quality and bitrates.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2002년도 ITC-CSCC -2
• /
• pp.1308-1311
• /
• 2002

We present a low-power MPEG-4 video codec chip capable of delivering high-quality video data in wireless multimedia applications. The discussion will focus on the architectural design techniques for implementing a high-performance video compression/decompression chip at low power architectures. The proposed MPEG-4 video codec can perform 30 frames/s of QCIF or 7.5 frame/s of CIF at 27MHz for 128k∼144kbps. By introducing the efficiently optimized Frame Memory Interface architecture, low power motion estimation and embedded ARM microprocessor and AMBA interface, the proposed MPEG-4 video codec has low power consumption for wireless multimedia applications such as IMT-2000.

• 한국정보처리학회논문지
• /
• 제3권3호
• /
• pp.608-616
• /
• 1996

본 논문에서는 영상회의를 위한 멀티미디어 하드웨어 구조를 입 출력 중심으로 제안 하고, 구조를 대기모델로 표현하여 시스템의 동작을 분석하였으며, 설계와구현 을 통해 분석결과를 고찰하였다. 영상회의시에 발생되는 멀티미디어 데이타의 병목 현상 과 비디오 데이타의 크기, 프레임 수, 화자의 수 및 압축율의 변화를 모의실험하여 가능한 영상회의 수준과 문제점을 분석하였다. 또 분석된 내용의 요구를 .근사적으로 반영하는 시스팀을 구현하고 시험하여 멀티미디어 시스팀 입축력 설계시에 고려해야 할 사항들을 기술하였다.

• 한국멀티미디어학회논문지
• /
• 제15권3호
• /
• pp.299-311
• /
• 2012

최근, 이종 단말 및 네트워크간의 통신 환경에서도 one source, multi-user 서비스를 지원하기 위한 H.264 SE(scalable extension)가 차세대 멀티미디어 서비스를 위한 표준으로 자리매김 하고 있다. 하지만, 기존의 DRM 기법들은 네트워크 전송 환경 및 단말의 성능에 따라 전송 데이터 량을 가변하는 H.264 SE 시스템에는 합하지 않다. 본 논문에서는 H.264 SE에 적합한 비디오 워터마킹과 암호화 기법을 결합한 정보보호 기법을 제안한다. 제안 논문에서 워터마크 삽입량 및 삽입 위치는 네트워크 및 단말의 상태에 따라 결정되는 enhancement layer들이 포함하는 프레임 수를 이용해 계산된다. 또한 비디오 워터마킹과 데이터 암호화로 인해 발생하는 비디오 부호화 과정에서의 시간지연을 최소화하기 위해 두 과정을 비디오 압축 시 동시에 수행한다. 실험 결과, 본 제안 기법은 비디오 압축 및 일반 신호 처리, 기하학적 처리에 강인함을 확인하였다.

• 한국멀티미디어학회논문지
• /
• 제16권5호
• /
• pp.539-548
• /
• 2013

움직임 추정은 비디오 영상 압축에 있어서 중요한 역할을 하지만 최적의 움직임 벡터를 추정하기 위해 많은 계산량을 요구한다. 다시점 비디오는 하나의 3차원 장면을 여러 시점에서 다수의 카메라로 촬영한 동영상으로 다시점 비디오 부호화를 위한 움직임 추정의 계산량은 카메라 수에 비례하여 증가한다. 본 논문에서는 다시점 비디오 부호화를 위한 움직임 추정의 계산량을 줄이면서 영상 화질을 유지하는 저 복잡도 움직임 추정 기법을 제안하였다. 제안한 기법은 계층적인 탐색 기법으로 4-그리드 다이아몬드 탐색 패턴, 2-그리드 다이아몬드 탐색 패턴 그리고 TZ 2 point 탐색 패턴으로 구성되었다. 이들 탐색 패턴들은 움직임 벡터의 분포 특성을 이용하여 탐색 점들을 배치함으로써 적은 계산량으로 움직임 벡터를 추정할 수 있다. 제안한 기법의 성능을 JMVC의 고속 움직임 추정 기법인 TZ 탐색 기법의 성능과 비교하였을 경우, 영상 화질 면에서 약 0.01~0.24(dB) 화질 저하를 보였지만 움직임 추정의 계산량을 약 42%~80% 줄임으로서 약 1.8~4.5배 속도 향상을 보였다.