DOI QR코드

DOI QR Code

Design of Narrative Text Visualization Through Character-net

캐릭터 넷을 통한 내러티브 텍스트 시각화 디자인 연구

  • Received : 2014.10.27
  • Accepted : 2014.12.17
  • Published : 2015.02.28

Abstract

Through advances driven by the Internet and the Smart Revolution, the amount and types of data generated by users have increased and diversified respectively. There is now a new concept at the center of attention, which is Big Data for assessing enormous amount of data and enjoying new values therefrom. In particular, efforts are required to analyze narratives within video clips and to study how to visualize such narratives in order to search contents stored in the Big Data. As part of the research efforts, this paper analyzes dialogues exchanged among characters and offers an interface named "Character-net" developed for modelling narratives. The interface Character-net can extract characters by analyzing narrative videos and also model the relationships between characters, both in the automatic manner. This signifies a possibility of a tool that can visualize a narrative based on an approach different from those used in existing studies. However, its drawbacks have been observed in terms of limited applications and difficulty in grasping a narrative's features at a glace. It was assumed that Character-net could be improved with the introduction of information design. Against the backdrop, the paper first provides a brief explanation of visualization design found in the data information design area and investigates research cases focused on the visualization of narratives present in videos. Next, key ideas of Character-net and its technical differences from existing studies have been introduced, followed by methods suggested for its potential improvements with the help of design-side solutions.

인터넷 발전과 스마트 혁명을 거치며 사용자가 생산하는 데이터양이 중가하고 그 유형도 다양해졌다. 이렇게 방대한 양의 데이터를 분석하고 새로운 가치로 활용한다는 개념의 빅데이터가 새로운 이슈로 부상하였다. 더욱이 빅데이터 속의 콘텐츠들을 검색하기 위해서는 동영상이 포함하고 있는 스토리에 대한 분석과 시각화에 대한 연구가 필요하다. 따라서 본 연구에서는 등장인물들 간의 대화를 분석하여 스토리를 모델링하는 캐릭터 넷(Character-net)이라는 인터페이스를 개발하였다. 캐릭터 넷은 스토리가 있는 동영상을 분석해서 인물들을 자동으로 추출할 수 있고, 등장인물들 간의 관계를 자동으로 모형화 할 수 있다. 이로써 기존 연구와는 다른 방법으로 스토리를 가시화하는 툴의 가능성을 발견할 수 있었다. 하지만 아직 활용하기 어렵고 한 눈에 스토리 특징을 파악하기 어렵다는 단점이 발견되었다. 이러한 캐릭터 넷을 개선하기 위해서는 정보 디자인을 접목하여 해결할 수 있을 것이라 가정하였다. 따라서 본고에서는 먼저 데이터 정보디자인 분야에서의 시각화 디자인들을 간략하게 소개하였다. 나아가 동영상 스토리를 시각화하는 연구 사례들을 살펴보았다. 그리고 캐릭터 넷의 핵심 아이디어와 기존 연구와의 기술적 차이점에 대해 소개한 뒤, 추가적으로 이를 디자인적 솔루션을 접목하여 개선할 수 있는 방법들을 모색하였다.

Keywords

References

  1. 김지숙, 빅데이터 활용과 분석기법 고찰, 고려대학교 대학원, 2013.
  2. 유은순, 박승보, "스토리 기반의 정보 검색 연구", 지능정보연구, Vol.19, No.4, pp.81-96, 2013. https://doi.org/10.13088/jiis.2013.19.4.081
  3. 안종욱, 이미숙, 신동빈, "공간 빅데이터 개념 및 체계 구축방안 연구", 한국공간정보학회, Vol.21, No.5, pp.43-51, 2013.
  4. 신청우, "인터넷신문과 종이신문의 디자인특성 분석", 기초조형학연구, 한국기초조형학회회 Vol.2, No.1, pp.113-122, 2001.
  5. 오성룡, 사용자 조사 데이터 시각화에 관한 연구: 인터랙션 디자인 분야의 사용자 조사 데이터 사례를 중심으로, 국민대학교 테크노디자인대학원, 2004
  6. 이지선, "빅데이터를 위한 정보디자인의 시각화 방법 및 표현 연구", 한국기초조형학회, Vol.14, No.3, pp.261-269, 2013.
  7. A. Baikadi, J. Goth, C. M. Mitchell, E. Y. Ha, B. W. Mott, and J. C. Lester, "Towards a computational model of narrative visualization",In Workshops at the Seventh Artificial Intelligence and Interactive Digital Entertainment Conference, pp.582-587, 2011.
  8. 로버트 제이콥슨, 장동훈 역, 정보디자인, 안그라픽스, 2002.
  9. http://en.wikipedia.org/wiki/Chernoff_face
  10. http://www.matthiasdittrich.com/projekte/narratives/visualisation/index.html
  11. http://visual.ly/liveplasma
  12. http://www.akamai.com/html/technology/dataviz1.html
  13. http://silvertonconsulting.com/blog/2011/06/24/big-data-part-3/#sthash.zBS1SCg4.dpbs
  14. http://www.imaso.co.kr/?doc=bbs/gnuboard.php&bo_table=article&wr_id=40695
  15. http://www.gapminder.org/
  16. http://wikibon.org/blog/data-visualization/
  17. http://www.textarc.org/
  18. T. Legan and L. Baker, "Visualizing the Text of Philip Pullman's Trilogy "His Dark Materials", Proceedings of NordiCHI, pp.759-764, 2010.
  19. http://research.microsoft.com/en-us/projects/bookviz/visualization.aspx
  20. http://www.stefanieposavec.co.uk/-everything-in-between/#/writing-without-words/
  21. http://www.chrisharrison.net/index.php/Visualizations/BibleViz
  22. 김상락, "문학 작품에서의 복잡계 연결망 분석 : 소설 토지를 중심으로", 한국물리학회, 제50권, 제4호, pp.267-271, 2004.
  23. 김윤경, 신현일, 구자을, 김학용, "소설 삼국지 등장인물 네트워크의 동적 변화 분석", 한국콘텐츠학회논문지, 제9권, 제4호, pp.364-371, 2009. https://doi.org/10.5392/JKCA.2009.9.4.364
  24. 박승보, 백영태, "등장인물들의 시간적 관계 변화에 기초한 스토리 시각화에 관한 연구", 한국컴퓨터정보학회, Vol.18, No.3, pp.119-126, 2013. https://doi.org/10.9708/jksci.2013.18.3.119
  25. http://www.creativeapplications.net/processing/cinemetrics-processing/
  26. P. Seung-Bo, O. Kyeong-Jin, and J. Geun-Sik, "Social Network Analysis in a Movie using Character-net", Multimedia Tools and Applications, Vol.59, No.2, pp.601-627, 2012. https://doi.org/10.1007/s11042-011-0725-1