Journal of Broadcast Engineering (방송공학회논문지)

The Korean Institute of Broadcast and Media Engineers (한국방송∙미디어공학회)
권호 표지

An Intelligent Display Scheme of Soccer Video for Multimedia Mobile Devices

멀티미디어 이동형 단말을 위한 축구경기 비디오의 지능적 디스플레이 방법

  • Seo Kee-Won (Information and Communications University (ICU) Visual Information Processing Lab.) ;
  • Kim Chang-Ick (Information and Communications University (ICU) Visual Information Processing Lab.)
  • 서기원 (한국정보통신대학교 (ICU) 시각정보처리연구실) ;
  • 김창익 (한국정보통신대학교 (ICU) 시각정보처리연구실)
  • Published : 2006.06.01
Download PDF
⟨ Previous Next ⟩

Abstract

A fully automatic and computationally efficient method is proposed for intelligent display of soccer video on small multimedia mobile devices. The rapid progress of the multimedia signal processing has contributed to the extensive use of multimedia devices with a small LCD panel. With these emerging small mobile devices, the video sequences captured for standard- or HDTV broadcasting may give the small-display-viewers uncomfortable experiences in understanding what is happening in a scene. For instance, in a soccer video sequence taken by a long-shot camera technique, the tiny objects (e.g., soccer ball and players) may not be clearly viewed on the small LCD panel. Thus, an intelligent display technique is needed for small-display-viewers. To this end, one of the key technologies is to determine region of interest (ROI), which is a part of the scene that viewers pay more attention to than other regions. In this paper, the focus is on soccer video display for mobile devices. Instead of taking visual saliency into account, we take domain-specific approach to exploit the characteristics of the soccer video. The proposed scheme includes three modules; ground color learning, shot classification, and ROI determination. The experimental results show the propose scheme is capable of intelligent video display on mobile devices.

이 논문에서 우리는 작은 휴대형 단말기에서 축구영상을 화면에 보여주는 자동적이면서도 효율적인 방법을 제안하고자 한다. 정보통신 기술의 급속한 발전으로 작은 LCD 패널을 가진 멀티미디어 장치의 사용이 대단히 빠른 속도로 증가하고 있다. 이러한 작은 장치들의 증가 추세에도 불구하고 일반 TV나 HDTV 용으로 녹화되는 대부분의 동영상들은 작은 이동형 기기 사용자들이 화면 내의 상황을 인식하는데 있어서 많은 불편한 경험을 갖게 한다. 예를 들어, 원거리 샷 카메라 기법으로 찍힌 축구 경기 동영상의 경우, 운동장 내의 공과 선수들의 모습이 매우 작아서 작은 화면으로 알아보기가 힘든 경우가 발생한다. 따라서 소형 디스플레이 시청자들의 원활한 이해를 위해 지능형 디스플레이 기술을 제안하고자 한다. 이를 위한 핵심기술의 하나가 관심 영역을 자동으로 결정하는 일이다. 여기서 관심영역이란 시청자들이 화면 내에서 다른 부분에 비해 더욱 관심을 갖게 되는 부분을 말한다. 이 논문에서, 우리는 소형 단말기를 위한 축구 경기 비디오의 지능적 디스플레이에 초점을 맞춘다. 화면 내에서 시각적으로 현저한 부분의 검출에 관심을 갖는 방법 대신, 축구 경기 비디오 고유의 특징을 이용하는 도메인 한정적인 접근법을 이용한다. 제안된 알고리즘은 크게 세 단계 - 그라운드 색 학습과 샷 분류, 관심영역 결정으로 구성된다. 실험 결과를 통해 제안된 알고리즘이 이동형 단말기 상에서 지능형 디스플레이를 위한 좋은 해결책임을 보이고자 한다.

Keywords

References

  1. H. Knoche, J. D. McCarthy, and M. A. Sasse, 'Can small be beautiful?: assessing image resolution requirements for mobile tv,' in proc. of the 13th annual ACM international conference on Multimedia, pp. 829-838, ACM Press, (New York, NY, USA), 2005
  2. W. H. Cheng, W. T. Chu, and J. L. Wu, 'A visual attention based region of interest determination framework for video sequences,' IEICE Transactions on Information and Systems, E 88D, pp. 1578-1586, 2005
  3. L. Itti, C. Koch, and E. Niebur, 'A model of saliency based visual attention for rapid scene analysis,' IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 20, no.11, pp. 1254-1259, Nov. 1998 https://doi.org/10.1109/34.730558
  4. Y. F. Ma and H. J. Zhang, 'A model of motion attention for video skimming,' in Proc. ICIP, pp. 129-132, 2002
  5. J. D. Foley, A. van Dam, S. K. Feiner, J. F. Hughes, Computer Graphics Principles and Practice, pp. 592-593, Addison Wesley, 1996
  6. A. Ekin, A. M. Tekalp, and R. Mehrotra, 'Automatic soccer video analysis and summarization,' IEEE Transactions on Image Processing, vol. 12, pp. 796-807, 2003 https://doi.org/10.1109/TIP.2003.812758
  7. K. Wan, X. Yan, X. Yu, and C. Xu, 'Real time goal mouth detection in mpeg soccer video,' in proc. of the eleventh ACM inter national conference on Multimedia, pp. 311-314, ACM Press, (New York, NY, USA), 2003
  8. R. W. Lienhart, 'Comparison of automatic shot boundary detection algorithms,' in proc. of Storage and Retrieval for Image and Video Databases VII 3656(1), pp. 290-301, SPIE, 1998
  9. Y. Seo, S. Choi, H. Kim and K. Hong, 'Where Are the Ball and Players? Soccer Game Analysis with Color Based Tracking and Image Mosaick,' in proc. of ICIAP '97: Proceedings of the 9th International Conference on Image Analysis and Processing‐ Volume II, pp. 196-203, Springer Verlag, London, UK, 1997
  10. Y. Ohno, J. Miura and Y. Shirai, 'Tracking Players and a Ball in Soccer Games,' in proc. of Int. Conf. on Multisensor Fusion and Integration for Intelligent Sys., Taipei, Taiwan, 1999
  11. X. Yu, C. Xu, H. W. Leong, Q. Tian, Q. Tang, K. Wan, 'Trajectory Based Ball Detection and Tracking with Applications to Semantic Analysis of Broadcast Soccer Video,' in proc. of MULTIMEDIA '03: Proceedings of the eleventh ACM international conference on Multimedia, pp. 11-20, ACM Press, (New York, NY, USA), 2003
  12. X. Fan and X. Xie and H. Q. Zhou and W. Y. Ma, 'Looking into Video Frames on Small Displays,' in proc. of the eleventh ACM international conference on Multimedia, pp. 247-250, ACM Press, (New York, NY, USA), 2003
  13. S.R. Subramanya and B.K. Yi, 'Mobile Content Customization,' IEEE Multimedia, vol. 12, Issue 4, pp. 104-105, 2005
  14. TCPMP, http://tcpmp.corecodec.org
  15. http://vega.icu.ac.kr/~ckim/projects