CAMAR Companion : Context-aware Mobile AR System for supporting the Personalization of Augmented Content in Smart Space

CAMAR Companion : 스마트 공간에서 증강 콘텐츠의 개인화를 위한 맥락 인식 모바일 증강 현실 시스템

In this paper, we describe CAMAR Companoin, a context-aware mobile AR system that provides a user-adaptive assistance with an augmented picture according to the user's context in smart space. It recognizes physical objects and tracks the movement of those objects with a camera embodied to a mobile device. CAMAR Companion observes a mobile user's context, which is sensed by various kinds of sensors in environments, and infers user preference for the content in the situation. It recommends multimedia content relevant to the user's context. It overlays selected content over associated physical objects and enables the user to experience the content in a user-centric manner. Furthermore, we have developed the prototype to illustrate how our system could be used for a mobile user's well-being care applications in smart home environments. In this application, we found that our system could perceive a user preference even though a user's context is changed dynamically, and then adapt the multimedia content with respect to the user's context effectively. As such, the proposed user-adaptive system has the potential to play an important role in developing customized user interfaces in mobile devices.

본 논문에서는 스마트 공간에서 모바일 사용자의 맥락 정보에 따라 개인화된 콘텐츠를 증강시키는 맥락 인식 모바일 증강 현실 시스템인 CAMAR Companion을 소개한다. 이는 모바일 기기에 부착된 카메라를 이용하여 스마트 공간의 오브젝트를 인식하고 인식된 오브젝트의 움직임을 추적한다. 그리고 여러 가지 센서들로부터 획득된 정보를 통합하여 모바일 사용자의 변화하는 맥락 정보를 실시간으로 인식한다. 또한 모바일 사용자의 맥락 정보 히스토리를 기반으로 해당 맥락에 대한 사용자의 프로파일, 특히 사용자가 선호하는 콘텐츠 혹은 맥락에 용이한 콘텐츠에 대한 정보를 추론한다. 그리고 모바일 기기를 통해 제공되는 콘텐츠를 사용자의 맥락에 적절한 형태로 디스플레이하거나 물리적 오브젝트에 증강시킴으로써 사용자에게 용이한 형태의 콘텐츠를 제공한다. 더 나아가 제안한 시스템을 기반으로 스마트 홈 환경에서의 사용자 맥락 정보에 따라 개인화된 콘텐츠를 증강 시켜주는 맥락 인식 모바일 증강 현실 정보 도우미를 구현하였다. 이는 사용자의 변화하는 맥락 정보를 실시간으로 인식하고 해당 맥락에 대한 사용자의 프로파일을 동적으로 추론하여 사용자로 하여금 개인화된 증강 콘텐츠를 경험할 수 있도록 하였다. 궁극적으로 이를 통하여 모바일 기기에서 개인화된 사용자 인터페이스를 개발하는 데 있어 제안한 맥락 인식 모바일 증강 현실 시스템의 응용 가능성을 확인하고자 한다.