• Journal of Information Display
• /
• 제5권3호
• /
• pp.1-7
• /
• 2004

We developed a novel frame interpolation method to interpolate a frame between two successive original frames. Using this method, we are able to apply a double-rate driving method instead of an impulse driving method where a black frame is inserted between two successive original frames. The double-rate driving method enables amelioration of the motion blur of LCDs caused by the characteristics of human vision without reducing the luminosity of the whole screen. The image quality of the double-rate driving method was also found to be better than that of an impulse driving method using our motion picture simulator and an actual panel. Our initial model of our frame interpolation method consists of motion estimation with a maximum matching pixel count estimation function, an area segmentation technique, and motion compensation with variable segmentation threshold. Although salt and pepper noise remained in a portion of an object mainly due to inaccuracy of motion estimation, we verified the validity of our method and the possibility of improvement in hold-type motion blurring.

• 한국정보디스플레이학회:학술대회논문집
• /
• 한국정보디스플레이학회 2004년도 Asia Display / IMID 04
• /
• pp.251-254
• /
• 2004

We developed a novel Fame interpolation method to interpolate a frame between two successive original frames. Using this method, we are able to apply a double-rate driving method instead of an impulse driving method where a black Fame is inserted between two successive original Fames. The double-rate driving method enables improvement to the motion blur of LCDs caused by the characteristics of human vision without reducing the luminosity of the whole screen. Here, we report on the initial model of our frame interpolation method.

• 한국산학기술학회논문지
• /
• 제18권7호
• /
• pp.734-740
• /
• 2017

낮은 프레임률을 가지는 동영상을 높은 프레임률 디스플레이 장치를 통해 재생하는 경우 프레임률 향상기법이 필요하다. 프레임 향상 기법은 연속된 원본 프레임 사이에 프레임을 보간함으로써 생성하며 이러한 프레임 보간방법은 크게 프레임 복사 기법과 움직임벡터 기반의 보간기법으로 나뉜다. 프레임 복사 기법은 단순히 보간하고자 하는 프레임의 이전 또는 이후 프레임을 복사하는 기법으로 매우 낮은 복잡도를 가지지만 저키현상이 발생하는 단점이 있다. 움직임 벡터 추정 및 보상을 통한 프레임 보간기법은 다시 화소단위의 방법과 블록단위의 움직임 추정 방법으로 나눌 수 있다. 화소기반의 경우 영역별 다른 보간 방법을 사용하여 보간을 수행하며 높은 복잡도를 가지는 단점이 있다. 블록기반 방법은 상대적으로 낮은 복잡도를 가지지만 블록킹현상이 발생한다는 단점을 가진다. 제안하는 방법은 블록단위의 움직임 추정 기반 프레임률 향상기법으로 프레임내 움직임의 선형성을 이용하여 움직임을 추정한다. 이 과정에서 보간하고자 하는 프레임 이전 두 프레임과 이후 한 프레임을 사용하여 움직임 추정 및 보상을 수행함으로써 프레임을 보간하다. 실험결과 제안한 알고리즘은 객관적 화질 측면에서 이전의 다른 방법과 비교하여 높은 성능을 보이고 특히 해상도가 높은 경우 더욱 우수한 성능을 가지는 것으로 나타났으며 주관적 화질 또한 상대적으로 우수한 것을 볼 수 있었다.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2000년도 하계종합학술대회 논문집(4)
• /
• pp.54-57
• /
• 2000

In this paper, we propose a new interpolation method by using the motion between two moving image frames. In the proposed method, the movement is detected by using neighborhood pixels of target pixel in the past frame and the present frame. Then, H-shaped pseudomedian filter (below HPMED) is used for the still part of the image and Delta-shaped interpolation filter (below $\Delta$-shaped) for used in the moving part of the image. We detect the movement by comparing the differences between pixels in 4${\times}$5 window of the past frame and the present frame; the difference has a critical value. We simultaneously accomplish checking PSNR(peak signal noise ratio) and subjective assessment that is placed the focus on edge characteristic for assessment of result in computer simulation. The results show that the proposed adaptive method is better than the conventional methods.

• Journal of information and communication convergence engineering
• /
• 제9권2호
• /
• pp.201-206
• /
• 2011

FRUC (Frame Rate Up-Conversion) technique needs an effective frame interpolation algorithm using motion information between adjacent neighboring frames. In order to have good visual qualities in the interpolated frames, it is necessary to develop an effective detection and interpolation algorithms for occluded regions. For this aim, this paper proposes an effective occluded region detection algorithm through the adaptive forward and backward motion searches and also by introducing the minimum value of normalized cross-correlation coefficient (NCCC). That is, the proposed scheme looks for the location with the minimum sum of absolute differences (SAD) and this value is compared to that of the location with the maximum value of NCCC based on the statistics of those relations. And, these results are compared with the size of motion vector and then the proposed algorithm decides whether the given block is the occluded region or not. Furthermore, once the occluded regions are classified, then this paper proposes an adaptive interpolation algorithm for occluded regions, which still exist in the merged frame, by using the neighboring pixel information and the available data in the occluded block. Computer simulations show that the proposed algorithm can effectively classify the occluded region, compared to the conventional SAD-based method and the performance of the proposed interpolation algorithm has better PSNR than the conventional algorithms.

• 대한전자공학회:학술대회논문집
• /
• 대한전자공학회 2008년도 하계종합학술대회
• /
• pp.927-928
• /
• 2008

In this paper, a interpolation error concealment algorithm of motion compensated interpolated frame for motion compensated frame rate conversion to reduce the block artifacts caused by failure of conventional motion estimation based on block matching algorithm is proposed. Experimental results show good performance of the proposed scheme with significant reduction of the block artifacts.

• Journal of the Optical Society of Korea
• /
• 제19권5호
• /
• pp.537-543
• /
• 2015

Liquid crystal displays (LCDs) have slow responses, so motion blurs are often perceived in fast moving scenes. To reduce this motion blur, we propose a novel method of robust motion compensated frame interpolation (MCFI) based on bidirectional motion estimation (BME) and weight-overlapped block motion compensation (WOBMC) with variable block sizes. In most MCFI methods, a static block size is used, so some block artefacts and motion blurs are observed. However, the proposed method adjusts motion block sizes and search ranges by comparing matching scores, so the precise motion vectors can be estimated in accordance with motions. In the MCFI, overlapping ranges for WOBMC are also determined by adjusted block sizes, so the accurate MCFI can be performed. In the experimental results, the proposed method strongly reduced motion blurs arisen from large motions, and yielded interpolated images with high visual performance and peak signal-to-noise ratio (PSNR).

• 한국통신학회논문지
• /
• 제34권7C호
• /
• pp.687-696
• /
• 2009

동영상 신호의 프레임율 증가를 위해서 움직임 보상 보간(motion compensated interpolation) 기법이 많이 사용 된다. 특히 쌍방향 예측을 이용한 움직임 추정 기법은 움직임 추정 과정에서 빈 공간이나 겹쳐지는 문제를 해결함으로써 중간 삽입 프레임 생성 과정에서 좋은 성능을 보인다. 그러나 이와 같은 움직임 추정 과정에서 잘못된 움직임 벡터를 선택할 경우 왜곡된 블록을 생성할 수 있다. 본 논문에서는 쌍방향 움직임 예측을 기반으혹 하는 움직임 보상 보간 기법의 움직임 추정 과정에서 선택되는 움직임 벡터가 올바른 추정인지를 판별하고 인접한 움직임 벡터와 병함한 블록을 이용하여 1/2 화소 단위로 움직임 벡터를 보정하는 새로운 기법을 제안한다. 또한, 제안하는 기법이 기존의 움직임 벡터 추정 기법에 비해서 우수한 성능을 보이는 것을 모의 실험을 통하여 확인한다.

• 정보처리학회논문지:소프트웨어 및 데이터공학
• /
• 제13권1호
• /
• pp.17-27
• /
• 2024

비디오 프레임 보간(Video Frame Interpolation)은 움직임의 연속성을 증가시켜 영상을 부드럽게 재생할 수 있어 영상, 미디어 분야에서 사용되는 중요한 기술이다. 딥러닝 기반 비디오 프레임 보간 연구에서 널리 사용되는 방법 중 하나인 커널 기반 방법(Kernel Based Method)의 경우, 지역적인 변화를 잘 포착하지만 전체적인 변화를 처리하는 데 한계가 있었다. 이에 본 논문에서는 주요 변화 포착에 집중하기 위한 특성맵 차분, Two Direction을 적용한 새로운 U-Net 구조를 통해 파라미터 수를 줄이면서 중간 프레임을 보다 정확하게 생성하고자 한다. 실험 결과 제안한 구조가 기존보다 Vimeo, Middle-burry 등의 일반적인 데이터셋과 새로운 YouTube 데이터셋에서 기존 모델보다 약 61% 더 적은 파라미터로 PSNR 수치가 최대 0.3 우수한 성능을 달성하였다. 본 논문에서 사용한 코드는 https://github.com/Go-MinSeong/SF-AdaCoF에서 확인 가능하다.

• 한국콘텐츠학회논문지
• /
• 제12권3호
• /
• pp.1-8
• /
• 2012

비디오 프레임 율 증가 변환은 가전 분야에서 매우 다양한 응용으로 인해 매우 많은 관심을 받아 오고 있다. 대 부분의 진보된 FRUC 알고리즘은 보간된 프레임들의 움직임 벡터장을 결정하는 움직임 보간 기술을 사용하고 있다. 그러나 몇 개의 응용 분야에서는 움직임 보상 보간 프레임이 얼마나 잘 복원되었는지에 대한 정보를 필요로 한다. 이와 같은 목적을 위해 본 논문에서는 프레임 기반의 적응적 예측에 기초한 움직임 보상 보간 프레임의 왜곡 예측 기법을 제안한다. 제안된 기법은 대칭형 움직임 탐색 및 보상 보간 기법에 적용되며, 세 가지 다른 예측 기법 즉, 순방향, 역방향 그리고 적응적 양방향 예측 기법으로 분석된다. 모의 실험을 통하여 제안된 적응적 양방향 왜곡 예측 방식이 다른 두 방식에 비해 성능이 우수함을 보인다.