Improvement of MIV using Deep Learning based Super Resolution

딥러닝 기반 초해상화 기술을 이용한 MIV 성능 개선

  • 정태현 (한국항공대학교 항공전자정보공학부) ;
  • 이윤섭 (한국항공대학교 항공전자정보공학부) ;
  • 오관정 (한국전자통신연구원) ;
  • 오병태 (한국항공대학교 항공전자정보공학부)
  • Published : 2022.11.18

Abstract

본 논문에서는 TMIV 부호화 과정에서 개선된 압축성능을 위해 딥러닝을 이용한 초해상화 기술을 적용하는 방식을 제안한다. 제안 방식에서는 TMIV 인코더에서 아틀라스 생성한 후, 해당 아틀라스의 패킹된 뷰들을 downsampling하여 뷰들이 축소된 아틀라스를 생성하는 방식을 사용한다. 생성된 아틀라스는 기존의 방식 그대로 VVC를 이용하여 부복호화를 한다. 복호화된 아틀라스를 렌더링을 위해 뷰로 만드는 과정 중에 딥러닝을 이용한 초해상화 기술을 적용하여 줄어든 뷰들을 원래의 크기로 복원시킨다. 제안 기술을 통해 복원된 뷰의 화질을 유지시킨 채 많은 비트율을 감소시킬 수 있음이 확인된다.

Keywords

Acknowledgement

이 논문은 정부(과학기술정보통신부)의 재원으로 정보통신기술진흥센터의 지원을 받아 수행된 연구임(No. 2018-0-00207, 이머시브전문 연구실)