Journal of Intelligence and Information Systems (지능정보연구)

Korea Intelligent Information System Society (한국지능정보시스템학회)
권호 표지

Gaze Mirroring-based Intelligent Information System for Making User's Latent Interest

사용자의 잠재적 흥미를 인식하기 위한 주시 모방 모델 기반의 지능형 정보 시스템

  • Received : 2010.05.04
  • Accepted : 2010.07.05
  • Published : 2010.09.30
Download PDF
⟨ Previous Next ⟩

Abstract

The information system that preserves and presents information collections, records, processes, retrievals, is applied in various fields recently and is supporting man's many activities. Conventional information systems are based on the reactive interaction model. Such reactive systems respond to only specific instructions, i.e. the defined commands, from the user. To go beyond the reactive interaction, it is necessary that the interactive dynamic interaction based information system which understands human's action and intention autonomously and then provides sensible information adapted to the user. Therefore, we propose a Gaze Mirroring-based intelligent information system for making user's latent interest using the internal state estimation methods based on the interactive dynamic interaction. Then, the proposed Gaze Mirroring method is that an anthropomorphic agent(avatar) actively established the joint attention with the user by imitating user's eye-gaze behavior. We verify that the Gaze Mirroring can elicit the user's behavior reflecting the latent interestand contribute to improving the accuracy of interest estimation. We also have confidence that the Gaze Mirroring promotes the self-awareness of interest. Such a Gaze Mirroring-based intelligent information system also provides suitable information to user by making user's latent interest using the internal state estimation.

정보의 수집, 기록, 처리, 저장을 하며 정보를 검색하고 제시해 주는 정보 시스템은 최근, 여러 방면에서 응용되어 인간의 여러 가지 활동을 지원하고 있다. 그런데, 현재의 정보 시스템은 일반적으로, 사용자의 명시적 제시에 대하여 시스템이 반응하고 정보를 제시하는 '반작용에 의한 소극적 모델(reactive model)'을 기반으로 하고 있다. 그러나 정보사회로 발전하기 위해서는 정보 시스템 자신이 자율적으로 인간의 행동이나 의도를 이해해, 거기에 기반을 두고 인간에게 지시나 정보 제공을 자발적으로 실시한다고 하는 '쌍방향의 동적 상호작용(mutual dynamic interaction)'이 필요하다. 따라서 본 논문에서는 정보시스템과 사용자의 '시선' 정보 기반의 쌍방향의 동적 상호작용을 통하여, 사용자의 '흥미' 라고 하는 심리적 상태를 추정하여, 보다 적절하고 효과적인 정보를 제공할 수 있는 주시 모방 모델 기반의 지능형 정보 시스템을 제안한다. 제안된 시스템은 의인 에이전트(avatar)를 이용하여 사용자의 주시 행동을 모방하는 것에 의해, 사용자와의 '공동 주의'를 실시하는 주시 모방(Gaze-Mirroring)이라는 방법을 도입하여, 시스템이 사용자의 잠재적인 흥미를 추정하고 추정된 결과에 따라 적절한 정보를 제시한다. 이와 같은 사용자의 시선정보를 이용한 주시 모방 모델 기반의 지능형 정보 시스템은 시스템의 적극적인 상호작용을 통한 새로운 상호작용 방법의 개발이 될 뿐만아니라, 사용자의 주시 정보를 통하여, 사용자의 잠재적 흥미를 표출함으로써, 사용자의 의도를 이해해, 사용자가 원하는 정보를 제시해 줄 수 있다.

Keywords

References

  1. Jacobs, T. J. "On Unconscious Communications and Covert Enactments : Some Reflections on Their Role in the Analytic Situation", Psychoanalytic Inquiry, Vol.21(2001), 4-23. https://doi.org/10.1080/07351692109348921
  2. Hirayama, T., Dodane, J. B., Kawashima, H. and Matsuyama, T. "Estimates of User Interest using Timing Structures between Proactive Content-Display Updates and Eye Movements", IEICE TRANSACTIONS on Information and Systems, Vol.E93-D, No.6(2010), 1470-1478. https://doi.org/10.1587/transinf.E93.D.1470
  3. Picard, R. W., Vyzas, E. and Healey, J., "Toward machine emotional intelligence : Analysis of affective physiological state", IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol.23, No.10(2001), 1175-1191. https://doi.org/10.1109/34.954607
  4. Emery, N. J., "The Eyes Have It : The Neuroethology, Function, and Evolution of Social Gaze", Neuroscience and Bio-behavioral Reviews, Vol.24(2000), 581-604. https://doi.org/10.1016/S0149-7634(00)00025-7
  5. Mundy, P. and Newell, L., "Attention, joint attention, and social cognition", Current Directions in Psychological Science, Vol.16, No.5(2007), 269-274. https://doi.org/10.1111/j.1467-8721.2007.00518.x
  6. Fujimoto, T., Sunayama, W., Yamaguchi, T. and Yachida, M., "Focusing Skill Transmission Support by Visualized Gaze Behavior", Transactions of the Japanese Society for Artificial Intelligence, Vol.19, No.3(2004), 174-183, in Japanese. https://doi.org/10.1527/tjsai.19.174
  7. Avarfordt, P. and Zhai, S., "Conversing with the user based on eye-gaze patterns", In Proceedings of SIGCHI 2005 Conference on Human- Factors in Computing Systems(2005), 221-230.
  8. Nadel, J., Guerini, C., Peze, A. and Rivet, C., "The Evolving Nature of Imitation as a Form for Communication", Imitation in Infancy, Univ. Press, Cambridge(1999), 209-234.
  9. Satake, J., Kobayashi, A., Kawashima, H., Hirayama, T., Minakuchi, M., Kozima, H. and Matsuyama, T., "Non-contact and Non-constraint Gaze Estimation for Interactive Information Display", Information Processing Society of Japan, SIG technical reports, Vol.2007, No.99(2007), 9-16, in Japanese.
  10. Yamaguchi, T., Nakamura, T., Sunayama, W. and Yachida, M., "Mirror agent : An interface agent that mirrors and supports user's behaviors by visualizing gazing lines", In Proceedings of International Conference on Human-Computer Interaction, Vol.4(2001), 394-398.
  11. Sejima, Y., Watanabe, T. and Yamamoto, M., "Analysis by Synthesis of Embodied Communication via Virtual Actor with a Nodding Response Model", Proceedings of Second International Symposium on Universal Communication, (2008), 225-230.
  12. Rizzolatti, G. and Craighero, L., "The Mirror-neuron System, Annual Review of Neuroscience", Vol.27(2004), 169-192. https://doi.org/10.1146/annurev.neuro.27.070203.144230
  13. Hirayama. T., Park, H. S. and Matsuyama, T., "Gaze Mirroring Approach Making User's Latent Interest Explicit", Technical Report of IEICE, Vol.108, No.487(2009), 79-84, in Japanese.
  14. Satake, J., Kobayashi, A., Hirayama, T., Kawashima, H., Minakuchi, M., Kozima, H. and Matsuyama, T., "Accuracy Improvement of Real-Time Gaze Estimation using High Resolution Camera", Technical Report of IEICE, Vol.107, No.491(2008), 137-142, in Japanese.