• Proceedings of the IEEK Conference
• /
• 2002.06c
• /
• pp.199-202
• /
• 2002

We described a real-time 3D computer vision system called MIMIC(Motion interface f Motion information Capture system) that can capture and save motion of an actor. This system analyzes input images from vision sensors and searches feature information like a head, hands, and feet. Moreover, this estimates intermediated joints as an elbow and hee using feature information and makes 3D human model having 20 joints. This virtual human model mimics the motion of an actor in real-time. Therefore this system can realize the movement of an actor unaffectedly because of making intermediated joint for complete human body contrary to other marker-free motion capture system.

• Proceedings of the Korea Multimedia Society Conference
• /
• 2002.05d
• /
• pp.1093-1098
• /
• 2002

본 연구실에서 개발한 MIMIC(Motion Interface & Motion Information Capture system)은 동작자의 동작을 획득하고, 동작의 의미를 이해할 수 있도록 설계된 시스템이다. 비전 센서로부터 입력된 영상을 분석하여 동작자의 머리와 두 손, 두 발의 정보를 찾는다. 그리고, 이 정보를 기반으로 팔꿈치나 무릎 등의 중간 관절을 추정한 후 20개의 관절을 가지는 3차원 인체 모델을 구성한다. 이 인체 모델은 동작자의 동작을 실시간으로 흉내낸다. 그러므로, 기존의 마커프리 모션캡쳐 시스템과 달리 완벽한 인체를 구성하기 위한 중간 관절까지 생성함으로써 동작자의 동작을 더욱 자연스럽게 구현할 수 있다.

• Journal of Digital Contents Society
• /
• v.18 no.8
• /
• pp.1627-1633
• /
• 2017

Human dance is difficult to learn since there is no effective way to imitate an expert's motion, a sequence of complicated body movements, without taking an actual class. In this paper, we propose a dance learning system using human depth information. In the proposed system, a set of example motions are captured from various expert dancers through a marker-free motion capture and archived into a motion database server for online dance lessons. Given the end-user devices such as tablet and kiosk PCs, a student can learn a desired motion selected from the database and send one's own motion to an instructor for online feedback. During this learning process, our system provides a posture-based motion search and multi-mode views to support the efficient exchange of motion data between the student and instructor under a networked environment. The experimental results demonstrate that our system is capable to improve the student's dance skills over a given period of time.

• Proceedings of the Korea Multimedia Society Conference
• /
• 2003.05b
• /
• pp.559-562
• /
• 2003

본 논문에서는 실시간 마커프리 모션캡쳐 시스템으로 캡쳐된 동작자의 Root와 End-effector 위치 데이터를 이용하여 가상 캐릭터의 동작을 생성하는 방법에 0해 기술한다. 동작자의 신체중심이 되는 Root와 머리, 손, 발과 같은 End-effector의 위치 데이터는 동작자의 전방 좌, 우에 위치한 동기화된 2대의 컬러 CCD 카메라를 이용하여 3차원 위치를 캡쳐한다. 영상으로부터 추출되지 않은 중간관절의 위치를 생성하기 위해 Root와 End-effector의 3차원 위치값들을 IK( Inverse Kinematics) 알고리듬에 적용하고, 생성된 위치값들에 다양한 신체의 제약조건을 고려하여 정밀하게 계산한다. 이러한 과정을 거치므로 서 20개 관절의 위치값을 생성할 수 있으며, 생성된 관절의 위치값을 가상 캐릭터에 적용하므로 서 캐릭터의 움직임을 실시간으로 생성할 수 있다.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.1348-1353
• /
• 2006

본 논문은 3 차원 게임 제어를 위한 인간의 동작인식에 대하여 기술하고 있다. 사용자의 편의성을 위하여 게임에 직관적으로 적용할 수 있는 인간의 동작들을 마커프리 모션 캡쳐 장비를 이용하여 취득하고, 이를 실시간으로 인식하는 동작 인식 시스템을 개발하였다. 또한, 개발된 동작인식기를 이용한 3차원 게임으로의 응용시스템의 접근 방식에 대하여 기술하고 있다. 개발된 동작 인식기는 LDA 방식에 기반을 둔 확률적 접근 방식으로 실시간으로 빠르고 정확하게 응용 시스템에 필요한 인간의 동작을 구별할 수 있도록 설계되었다. 개발된 시스템에서는 인식된 결과를 실시간으로 실제 어플리케이션에 전달하여 그 결과를 직접 사용자가 판단하여 다음 동작을 수행 할 수 있도록 되어 있다. 본 논문은, 이러한 실제 시스템의 개발을 통하여, 3 차원 인간 동작의 간단하고 유용한 활용 방법에 대한 해법을 제시하고 있다.

• Proceedings of the IEEK Conference
• /
• 2006.06a
• /
• pp.279-280
• /
• 2006

This paper describes a method for reconstructing 3D feet in a real time vision based marker free motion capture system. The proposed method is developed based on the visual hull and model fitting. For a real time computing, a special lookup table is employed in this paper. This method is implemented and tested using three CCD cameras and preliminary results are presented in this paper.

• Electronics and Telecommunications Trends
• /
• v.20 no.4 s.94
• /
• pp.16-28
• /
• 2005

최근 컴퓨터비전 기술을 이용하는 새로운 패러다임의 마커프리 모션캡처 기술이 미국의 MIT, CMU, MS, 일본의 ATR, MERL, 영국의 Oxford 대학 등에서 개발되고 있다. 마커프리 모션캡처는 연기자의 몸에 마커나 센서를 부착하지 않으며 특별한 조명이 필요 없으므로, 애니메이션 제작뿐만 아니라 일반인을 대상으로 하는 동작 인터페이스분야로의 확대 적용이 가능한 모션캡처 방식이다. ETRI에서는 여러 응용 분야에 모션인터페이스로 활용할 수 있는 환경 변화에 강인한 마커프리 모션캡처 시스템을 개발하고 있다. 몸에 마커나 센서를 부착하지 않은 자유 복장 상태의 동작자에 대해 조명 조건 변화 및 배경 변화에 강건하게 실시간 모션캡처 할 수 있는 기술 개발을 목표로 한다. 본 연구 개발이 성공한다면, 2007년에 876억 달러 규모로 확대될 전망인 영화, 방송물, 게임 등을 포함한 세계 영상 콘텐츠 시장에서 핵심 요소 기술 역할을 할 것이다. 그리고, 차세대 3D OS에서는 직관적 3D 포인팅 수단으로 활용될 수 있을 것이며, 2004년에 18,600만 대가 출고된 PC 시장을 고려하면 폭발적 수요가 예측된다.