Documentation of Intangible Cultural Heritage Using Motion Capture Technology Focusing on the documentation of Seungmu, Salpuri and Taepyeongmu

부록 3. 모션캡쳐를 이용한 무형문화재의 기록작성 - 국가지정 중요무형문화재 승무·살풀이·태평무를 중심으로 -

With the development of media, the methods for the documentation of intangible cultural heritage have been also developed and diversified. As well as the previous analogue ways of documentation, the have been recently applying new multi-media technologies focusing on digital pictures, sound sources, movies, etc. Among the new technologies, the documentation of intangible cultural heritage using the method of 'Motion Capture' has proved itself prominent especially in the fields that require three-dimensional documentation such as dances and performances. Motion Capture refers to the documentation technology which records the signals of the time varing positions derived from the sensors equipped on the surface of an object. It converts the signals from the sensors into digital data which can be plotted as points on the virtual coordinates of the computer and records the movement of the points during a certain period of time, as the object moves. It produces scientific data for the preservation of intangible cultural heritage, by displaying digital data which represents the virtual motion of a holder of an intangible cultural heritage. National Research Institute of Cultural Properties (NRICP) has been working on for the development of new documentation method for the Important Intangible Cultural Heritage designated by Korean government. This is to be done using 'motion capture' equipments which are also widely used for the computer graphics in movie or game industries. This project is designed to apply the motion capture technology for 3 years- from 2005 to 2007 - for 11 performances from 7 traditional dances of which body gestures have considerable values among the Important Intangible Cultural Heritage performances. This is to be supported by lottery funds. In 2005, the first year of the project, accumulated were data of single dances, such as Seungmu (monk's dance), Salpuri(a solo dance for spiritual cleansing dance), Taepyeongmu (dance of peace), which are relatively easy in terms of performing skills. In 2006, group dances, such as Jinju Geommu (Jinju sword dance), Seungjeonmu (dance for victory), Cheoyongmu (dance of Lord Cheoyong), etc., will be documented. In the last year of the project, 2007, education programme for comparative studies, analysis and transmission of intangible cultural heritage and three-dimensional contents for public service will be devised, based on the accumulated data, as well as the documentation of Hakyeonhwadae Habseolmu (crane dance combined with the lotus blossom dance). By describing the processes and results of motion capture documentation of Salpuri dance (Lee Mae-bang), Taepyeongmu (Kang seon-young) and Seungmu (Lee Mae-bang, Lee Ae-ju and Jung Jae-man) conducted in 2005, this report introduces a new approach for the documentation of intangible cultural heritage. During the first year of the project, two questions have been raised. First, how can we capture motions of a holder (dancer) without cutoffs during quite a long performance? After many times of tests, the motion capture system proved itself stable with continuous results. Second, how can we reproduce the accurate motion without the re-targeting process? The project re-created the most accurate motion of the dancer's gestures, applying the new technology to drew out the shape of the dancers's body digital data before the motion capture process for the first time in Korea. The accurate three-dimensional body models for four holders obtained by the body scanning enhanced the accuracy of the motion capture of the dance.

매체의 발달과 함께 무형문화재에 대한 기록도 여러 가지 방법으로 시도되고 있는데, 과거에는 문자 기록에만 의존하던 것에서 최근에는 사진, 음원 및 영상 등을 많이 활용하게 되었고, 그 방식에 있어서도 아날로그 방식에서 디지털 방식으로 이행하고 있는 추세이다. 이러한 변화의 과정에서 모션캡쳐를 이용한 무형문화재의 기록은 3차원적 기록을 필요로 하는 무용종목 등에서 주목을 받고 있다. 모션캡쳐란 움직이는 물체에 공간상의 위치를 표시하는 센서를 부탁시키고 시간의 흐름에 따라 센서의 위치를 컴퓨터의 좌표공간에 치환하여 기록하는 시스템으로, 모션캡쳐를 이용한 무형문화재의 기록은 형체가 없이 사람의 기예에 의해서 전승되고 있는 무형문화재의 신체적 표현을 디지털화 된 데이터로 나타내줌으써 무형문화재의 보존을 위한 과학적 자료를 제공해 준다. 국립문화재연구소는 멀티미디어 및 디지털 시대에 대응하기 위해 무형문화재에 대한 새로운 기록방안 개발을 목적으로 영화 및 게임 등의 CG제작 현장에서 널리 사용되고 있는 모션캡쳐(Motion Capture) 장비를 이용하여 국가지정의 중요무형문화재에 대한 기록 작업을 실시하고 있다. 본 사업은 복권기금을 사용하여 2005년부터 2007년까지 3개년에 걸쳐서 국가지정의 중요무형문화재 중 신체적 동작이 중요하게 표현되고 있는 무용 7개 종목 11건의 모션캡쳐 작업을 실시할 예정이다. 이미 1차 년도인 2005년에는 승무, 살풀이춤, 태평무 등 기술적 난이도가 낮은 독무(獨舞)를 중심으로 데이터 축적작업을 실시하였고, 2차 년도인 2006년에는 진주검무, 승전무, 처용무 등 군무(群舞)의 데이터를 축적할 예정이며, 3차 년도인 2007년에는 학연화대합설무의 데이터 축적과 함께 축적된 데이터를 이용한 무형문화재의 비교 분석 및 전승을 위한 교육용 프로그램과 대국민 서비스를 위한 3차원 콘텐츠 등을 개발할 계획이다. 본 보고서에서는 사업 초년도인 2005년도에 실시된 보유자 이매방, 이애주, 정재만의 승무, 이매방의 살풀이춤, 강선영의 태평무 등의 모션캡쳐 작업에 대하여 기술하고 있다. 이를 통하여 무형문화재에 대한 새로운 기록 방안을 모색하기 위한 시도를 소개하려고 한다. 이번 사업에서는 기술적으로 다음과 같은 두 가지 문제가 제기되었다. 첫 번째, 장시간(20~30분 가량)의 보유자의 춤을 끊김 없이 모션캡쳐 받을 수 있는가라는 문제였다. 수 차례의 사전 모의테스트를 통해 사업수행 적합성 판단을 마쳤고, 결국 사업수행을 무사히 마칠 수 있었다. 두 번째, 리타겟팅(RE-Targeting)이 없이 정확한 모션캡쳐 동작을 가공해 낼 수 있는가라는 문제였다. 모션캡쳐 데이터에서 국내 최초로 보유자의 골격구조 역추출 방식을 도입하여 최대한 정확한 보유자의 춤 동작을 구현해낼 수 있었다. 이번 작업에서는 이매방, 이애주, 정재만, 강선영 네 보유자의 전신 삼차원 스캔을 통해 정확한 삼차원 신체 모델링을 얻었고, 보유자 본인의 춤사위 동작을 그대로 모션캡쳐에 적용함으로써 최대한 정확도를 유도할 수 있었다.