Development of a Real-time Sensor-based Virtual Imaging System

센서기반 실시간 가상이미징 시스템의 구현

  • Published : 2003.03.01

Abstract

In sport programs, real-time virtual imaging system come into notice for new technology which can compose information like team logos, scores. distances directly on playing ground, so it can compensate for the defects of general character generator. In order to synchronize graphics to camera movements, generally two method is used. One is for using sensors attached to camera moving axis and the other is for analyzing camera video itself. KBS technical research institute developed real-time sensor-based virtual imaging system 'VIVA', which uses four sensors on pan, tilt, zoom, focus axis and controls virtual graphic camera in three dimensional coordinates in real-time. In this paper, we introduce our system 'VIVA' and it's technology. For accurate camera tracking we calculated view-point movement occurred by zooming based on optical principal point variation data and we considered field of view variation not only by zoom but also by focus. We developed our system based on three dimensional graphic environment. so many useful three dimensional graphic techniques such as keyframe animation can be used. VIVA was successfully used both in Busan Asian Games and 2002 presidential election. We confirmed that it can be used not only in the field but also in the studio programs in which camera is used within more close range.

실시간 가상이미징 시스템은 스포츠 중계 방송에서 팀의 문양이나 점수, 거리와 같은 정보를 실제 운동장 위에 합성해 줌으로써, 일반적인 자막기의 단점을 보완할 수 있는 새로운 기술로 주목받고 있다. 카메라의 움직임에 그래픽을 정확히 연동시키기 위해서는 카메라의 각 축에 센서를 장착하는 방식과 실제 카메라 영상 자체를 분석하는 방식이 사용된다. KBS 기술연구소에서는 방송용 렌즈 기 줌(zoom), 포커스(focus) 부와 팬(Pan), 틸트(tilt) 축에 센서를 부착하여, 실시간으로 3차원 그래픽의 가상 카메라를 제어하는 센서기반 가상이미징 시스템 'VIVA'를 개발하였다. 본 논문에서는 VIVA 시스템과 그 구현 기술을 소개하고자 한다. 정확한 카메라 추적을 위하여 주밍(zooming)시 발생하는 카메라 시점(view-point)의 이동을 렌즈의 광학주점 변이 데이터를 이용하여 계산하였으며, 줌 뿐만 아니라 포커스에 따른 화각 변화를 반영하였다. 3차원 그래픽에 기반하여 가상 이미징 시스템을 구현함으로써, 키프레임(keyframe) 애니메이션과 같은 유용한 그래픽 기술이 사용될 수 있도록 하였다. VIVA는 2002년 부산 아시안게임과 대선 개표 방송에 사용되어, 스포츠 프로그램뿐만 아니라 근거리 촬영이 요구되는 스튜디오 프로그램 제작에도 사용이 가능함을 확인하였다.

Keywords

References

  1. Yeo-Cheon Yoon, Hee-Jung Kim, Hye-Won Pyun, Jae-Ho Lee, Jin-Woo Kim and Seoung-Gyu Jeon, 'Virtual Character Animation Systems for Broadcasting: News Event & Soccer Game Re-enactment,' ABU Technical Review, No. 201. Jul.~Aug. 2002
  2. Ronald T. Azuma, 'A Survey of Augmented Reality,' Presence: Teleoperators and Virtual Environments, Vol. 6. No. 4. pp. 355-385, Aug. 1997 https://doi.org/10.1162/pres.1997.6.4.355
  3. Andrew Wojdata, 'Virtual Set: The state of the Art,' The Institution of Electrical Engineers, Accom Poland Ltd., Poland, 1996
  4. K. G. Trickett, 'Virtual sets for real productions,' International Broadcasting Convention Conference Publication, pp. 583-587, Sep. 2000
  5. G.A. Thomas, J. Jin, T. Niblett and C. Urquhart, 'A Versatile camera position measurement system for virtual reality TV production,' International Broadcasting Convention, 12-16 September 1997 Conference Publication, No. 447, pp. 284-289, IEE, 1997
  6. Leno S. Pedrotti, Frank L. Pedrotti and S.J., Optics and Vision, Prentice-Hall, Inc., New Jersey 07458, pp. 75-82, 1998