본 논문에서는 사각 평면이 아닌 실린더나 구 형태의 비평면 스크린에 고품질 파노라마 영상을 렌더링 하기 위해 스틸 카메라를 이용한 자동 캘리브레이션과 멀티 프로젝터를 이용한 파노라마 렌더링 시스템을 제안한다. 스틸 카메라를 이용한 비평면 스크린 캘리브레이션은 특정 패턴을 스크린에 투사하고 이를 촬영하여 프로젝터의 투사 왜곡을 보정하고 멀티 프로젝터간의 중첩 영역에 대한 보정을 자동 수행한다. 캘리브레이션이 완료된 이후에 멀티 프로젝터를 이용하여 고품질의 파노라마 비디오를 렌더링 하기 위해서 본 논문에서는 복수의 멀티 시스템과 동기화 카드를 이용하여 렌더링 시스템간의 재생 동기화를 수행 하였다. 제안하는 렌더링 시스템을 적용하면 기존의 전문가의 수동작업에 의한 인력 및 보정 시간을 줄일 수 있으며, 시스템 환경이 변하더라도 쉽게 적응적으로 렌더링 환경을 구축하는 것이 가능하고 고품질의 파노라마 비디오를 렌더링 하는 것이 가능하다.
본 논문에서는 소형 카메라와 프로젝터를 이용한 투사형 통합 증강현실 시스템에 대해 소개한다. 물체 인식을 위해 특징점 추출 알고리즘을 사용하며 물체의 깊이 정보는 구조광 방식을 이용해 추출한다. 인식된 물체에 대한 정보를 3차원 공간에 투사할 때, 가상카메라 개념을 이용한 투사 방법을 개발해 특정 점 집합간의 매핑(mapping)을 계산할 필요 없이 투사하고자 하는 대상의 메쉬(mesh)만을 가지고 원하는 위치에 영상을 투사할 수 있도록 일반화 시켰다. 따라서 단순한 평면뿐만 아니라 복잡한 곡면에 대해서도 복잡한 기하계산 없이 원하는 위치에 투사할 수 있게 되었다. 소개되는 내용에서는 소형 카메라와 프로젝터를 탑재한 로봇을 바탕으로 크게 프로젝터-카메라 시스템 캘리브레이션, 인식된 물체의 위치 계산 그리고 가상카메라 개념을 이용한 영상 투사 방법에 대해 설명한다.
본 연구에서는 영상을 대형으로 디스플레이 함과 동시에 사용자가 보다 세밀하게 관찰하고자하는 관심영역을 이동 프로젝터로 투사함으로써 개선된 해상도와 밝기로 디스플레이 하는 인터랙티브 투사 기법을 제안한다. 사용자는 이동 프로젝터를 들고 움직이며 관심영역의 위치를 변경하게 되는데 이 때 적절히 투사영상을 업데이트하기 위해 폐회로(closed-loop) 기반 추적 방법을 제안한다. 먼저 대형 디스플레이 영상에 이동 프로젝터의 위치를 나타내는 표시자를 삽입하고 이를 이동 프로젝터에 부착된 카메라로 획득한 연속영상에서 추출한다. 표시자의 중심이 항상 카메라 영상의 중심과 일치하도록 하는 제약조건 하에서 이를 만족시키기 위해 대형 디스플레이 상에서 표시자의 위치를 지속적으로 업데이트 한다. 이렇게 계산된 표시자의 위치에 해당하는 사각형 영역을 이동 프로젝터가 투사하게 되며 이때 카메라와 이동 프로젝터 사이의 투사변환을 적용하여 와핑한다. 표시자 분할은 총 네 단계로 이루어지며 카메라 영상에 대해 HSI 기반 전처리, 직선 탐지, 사각형 조건 검사, 교차비(cross-ratio) 검사를 거쳐 최종 네 개의 코너점이 결정된다. 제안된 투사 기법을 적용하여 구현한 인터랙티브 투사 시스템은 약 24fps의 처리속도를 지원하며 사용자 평가 결과 높은 유용성을 나타냈다.
본 논문은 두 대의 카메라와 한 대의 프로젝터로 구성된 Pro-cam시스템을 이용하여, 출력된 패턴 영상을 카메라로 촬영하고 이를 기반으로 Depth Map을 계산하는 모듈의 실시간 처리를 위한 GPU기반 병렬처리 기법을 제안한다. 입력받은 영상으로부터 구조광의 패턴을 해석하고, Depth Map을 계산하기 위해서, Dynamic pattern decoding하는 과정은 프로젝터의 패턴영상과 촬영된 카메라 패턴영상 간의 관계를 반복적으로 비교하므로, 이를 GPU 프로그래밍을 이용하여 병렬 처리를 통해 고속화하였다. 결과적으로 본 논문에서는 기존 CPU에서 수행했던 속도에 비해 약 18배정도 속도를 개선 할 수 있었다.
로봇의 지능적 작업을 위해서는 3차원 공간에 대한 감각기능이 필수적이며, 이러한 목적으로 시각장치가 사용되었을 경우 보정은 여타 절차에 선행하게 된다. 실제 보정 과정중 중요한 것은 제어점들과 그들의 영상점을 획득하는 일과 이를 이용한 광학적, 기하학적 카메라의 파라메터 결정에 있다. 본 논문에서는 빔프로젝터와 컴퓨터에 의해 제어되는 양안시 장치를 활용하여 많은 수의 3차원 제어점들과 이들의 영상좌표값들을 간편하게 획득하는 방법을 서술한다. 또, 위치가 고정된 카메라의 경우와 달리 능동 카메라 장치는 그 파라메터의 일부가 변수가 되는데, 이 경우에 유용한 선형의 보정 기법을 제안한다.
본 논문에서는 구조광 3차원 시스템을 위하여 영상처리를 하여 3차원 정밀도를 높이는 방법을 제안한다. 구조광 기반의 3차원 시스템은 투사된 패턴을 특징점으로 하기 때문에 프로젝터와 카메라 사이에 정확한 대응점을 획득해야만 3차원 복원 신뢰성을 높일 수 있다. 그러나 환경에 따라 정확한 대응점 획득이 어려운 점이 많다. 실제 환경에서 물체들은 물체의 재질과 물체 표면의 색상 등의 이유로 서로 다른 반사율을 가지고 있어 여러 물체들이 혼재 되어 있는 환경에서 각각 물체에 투사된 패턴을 정확히 구별하는 일은 어려운 일이다. 따라서 패턴을 획득한 2차원 영상을 개선하여 패턴을 정확히 구별하여 프로젝터와 카메라 간의 화소 대응점의 정확도를 높여야만 3차원 복원 데이터의 신뢰도를 높일 수 있다. 따라서 본 논문에서는 노이즈 제거 및 다양한 영상처리를 통하여 2차원 영상들에서 패턴을 정확히 구분하도록 하여 화소 대응점의 정확도를 높임으로써 최종적으로 3차원 정밀도를 개선할 수 있는 방법을 제공한다.
연극이나 뮤지컬과 같은 라이브 퍼포먼스 분야에서는 관객의 몰입도를 극대화하기 위한 다양한 무대 효과가 사용된다. 이러한 무대 효과는 전통적인 연출 기법으로부터 장면에 몰입을 줄 수 있는 다양한 무대 효과를 위한 장치들을 활용하고 있다. 본 논문에서는 공간증강현실 기반의 사물의 표면 텍스쳐를 제어할 수 있는 새로운 디지털 시각 효과를 제안한다. 이를 위하여 프로젝터-카메라 시스템을 사용하여 임의의 물체의 표면을 중화할 수 있는 방법을 제시한다. 객체의 표면에 신중하게 결정된 보상 영상(Compensation Image)을 투영함으로써 투명한 객체처럼 나타나도록 만들기 위해, 본 논문에서는 간단하고 효과적인 오프라인 프로젝터-카메라 보정을 위한 호모그래피 방법(Homography Method)를 사용한다. 따라서 제안하는 Radiometric 매개 변수를 측정하기 위한 스마트 프로젝터(Smart Projector)의 기본 알고리즘은 연극이나 뮤지컬에서의 시간적 변화에 유용하게 사용될 것이다.
최근 유비쿼터스 환경에서 프로젝터를 기반으로 사용자가 원하는 위치에 영상을 제공하는 유비쿼터스 디스플레이 연구가 진행 중이다. 프로젝터는 투사방향에 따라 영상의 왜곡이 발생함으로써, 프로젝터 기반의 유비쿼터스 디스플레이는 왜곡된 영상을 보정하는 것이 매우 중요하다. 영상 보정을 위한 기존 연구는 특정마커를 설치하거나 특정 패턴의 영상을 투사하는 등의 선행 작업을 통해 기하보정을 수행한다. 이 방법들은 투사방향이 변화될 때마다 선행 작업을 요구하므로 실시간 기하보정을 수행할 수 없다는 단점이 있다. 본 논문은 특정마커나 카메라와 같은 별도의 장치 없이도 투사되는 방향에 따라 영상의 왜곡 정도를 예측하여 실시간으로 보정된 영상을 제공하는 기하보정 시스템을 제안한다. 제안된 시스템은 특정 보정장치를 사용하지 않고 보정함으로써, 약 27fps의 빠른 처리속도를 가진다. 또한 상용 리모컨을 사용하여 프로젝터의 투사방향을 쉽게 제어하는 편리한 인터페이스를 제공한다.
반도체 기술의 비약적 발전에 힘입어 현재의 개인용 컴퓨터는 고성능 CPU를 탑재하고 1990대의 텍스트 기반의 운영체제에서 벗어나 그래픽 기반의 운영체제에서 다양한 멀티미디어 기능을 제공 한다. 이를 위한 입력장치로 텍스트 기반 운영체제에서 주로 사용된 키보드뿐 아니라 마우스, 카메라, 터치스크린 등의 다양한 장치들이 사용되고 있다. 그러나 빔 프로젝터를 이용한 프레젠테이션의 경우 아직도 레이저포인터를 이용한 발표가 일반적이며 발표자와 빔 프로젝트용 PC와의 인터랙션이 없기 때문에 다양한 멀티미디어 기능 구현이 제한적이다. 본 논문에서는 USB 웹 카메라를 이용하여 프로젝터 화면을 촬영한 후 영상처리 라이브러리인 OpenCV를 기반으로 레이저 포인터의 위치와 동작을 검출하여 원거리에서도 사용자가 레이저 포인터를 이용하여 마우스 동작을 재현할 수 있는 시스템을 개발하고자 한다. 이를 활용하면 레이저 포인터를 사용하여 발표자가 별도의 입력장치 없이 PC와의 인터랙션이 가능해져서 다양한 멀티미디어 기반의 프레젠테이션이 가능해진다.
본 웹사이트에 게시된 이메일 주소가 전자우편 수집 프로그램이나
그 밖의 기술적 장치를 이용하여 무단으로 수집되는 것을 거부하며,
이를 위반시 정보통신망법에 의해 형사 처벌됨을 유념하시기 바랍니다.
[게시일 2004년 10월 1일]
이용약관
제 1 장 총칙
제 1 조 (목적)
이 이용약관은 KoreaScience 홈페이지(이하 “당 사이트”)에서 제공하는 인터넷 서비스(이하 '서비스')의 가입조건 및 이용에 관한 제반 사항과 기타 필요한 사항을 구체적으로 규정함을 목적으로 합니다.
제 2 조 (용어의 정의)
① "이용자"라 함은 당 사이트에 접속하여 이 약관에 따라 당 사이트가 제공하는 서비스를 받는 회원 및 비회원을
말합니다.
② "회원"이라 함은 서비스를 이용하기 위하여 당 사이트에 개인정보를 제공하여 아이디(ID)와 비밀번호를 부여
받은 자를 말합니다.
③ "회원 아이디(ID)"라 함은 회원의 식별 및 서비스 이용을 위하여 자신이 선정한 문자 및 숫자의 조합을
말합니다.
④ "비밀번호(패스워드)"라 함은 회원이 자신의 비밀보호를 위하여 선정한 문자 및 숫자의 조합을 말합니다.
제 3 조 (이용약관의 효력 및 변경)
① 이 약관은 당 사이트에 게시하거나 기타의 방법으로 회원에게 공지함으로써 효력이 발생합니다.
② 당 사이트는 이 약관을 개정할 경우에 적용일자 및 개정사유를 명시하여 현행 약관과 함께 당 사이트의
초기화면에 그 적용일자 7일 이전부터 적용일자 전일까지 공지합니다. 다만, 회원에게 불리하게 약관내용을
변경하는 경우에는 최소한 30일 이상의 사전 유예기간을 두고 공지합니다. 이 경우 당 사이트는 개정 전
내용과 개정 후 내용을 명확하게 비교하여 이용자가 알기 쉽도록 표시합니다.
제 4 조(약관 외 준칙)
① 이 약관은 당 사이트가 제공하는 서비스에 관한 이용안내와 함께 적용됩니다.
② 이 약관에 명시되지 아니한 사항은 관계법령의 규정이 적용됩니다.
제 2 장 이용계약의 체결
제 5 조 (이용계약의 성립 등)
① 이용계약은 이용고객이 당 사이트가 정한 약관에 「동의합니다」를 선택하고, 당 사이트가 정한
온라인신청양식을 작성하여 서비스 이용을 신청한 후, 당 사이트가 이를 승낙함으로써 성립합니다.
② 제1항의 승낙은 당 사이트가 제공하는 과학기술정보검색, 맞춤정보, 서지정보 등 다른 서비스의 이용승낙을
포함합니다.
제 6 조 (회원가입)
서비스를 이용하고자 하는 고객은 당 사이트에서 정한 회원가입양식에 개인정보를 기재하여 가입을 하여야 합니다.
제 7 조 (개인정보의 보호 및 사용)
당 사이트는 관계법령이 정하는 바에 따라 회원 등록정보를 포함한 회원의 개인정보를 보호하기 위해 노력합니다. 회원 개인정보의 보호 및 사용에 대해서는 관련법령 및 당 사이트의 개인정보 보호정책이 적용됩니다.
제 8 조 (이용 신청의 승낙과 제한)
① 당 사이트는 제6조의 규정에 의한 이용신청고객에 대하여 서비스 이용을 승낙합니다.
② 당 사이트는 아래사항에 해당하는 경우에 대해서 승낙하지 아니 합니다.
- 이용계약 신청서의 내용을 허위로 기재한 경우
- 기타 규정한 제반사항을 위반하며 신청하는 경우
제 9 조 (회원 ID 부여 및 변경 등)
① 당 사이트는 이용고객에 대하여 약관에 정하는 바에 따라 자신이 선정한 회원 ID를 부여합니다.
② 회원 ID는 원칙적으로 변경이 불가하며 부득이한 사유로 인하여 변경 하고자 하는 경우에는 해당 ID를
해지하고 재가입해야 합니다.
③ 기타 회원 개인정보 관리 및 변경 등에 관한 사항은 서비스별 안내에 정하는 바에 의합니다.
제 3 장 계약 당사자의 의무
제 10 조 (KISTI의 의무)
① 당 사이트는 이용고객이 희망한 서비스 제공 개시일에 특별한 사정이 없는 한 서비스를 이용할 수 있도록
하여야 합니다.
② 당 사이트는 개인정보 보호를 위해 보안시스템을 구축하며 개인정보 보호정책을 공시하고 준수합니다.
③ 당 사이트는 회원으로부터 제기되는 의견이나 불만이 정당하다고 객관적으로 인정될 경우에는 적절한 절차를
거쳐 즉시 처리하여야 합니다. 다만, 즉시 처리가 곤란한 경우는 회원에게 그 사유와 처리일정을 통보하여야
합니다.
제 11 조 (회원의 의무)
① 이용자는 회원가입 신청 또는 회원정보 변경 시 실명으로 모든 사항을 사실에 근거하여 작성하여야 하며,
허위 또는 타인의 정보를 등록할 경우 일체의 권리를 주장할 수 없습니다.
② 당 사이트가 관계법령 및 개인정보 보호정책에 의거하여 그 책임을 지는 경우를 제외하고 회원에게 부여된
ID의 비밀번호 관리소홀, 부정사용에 의하여 발생하는 모든 결과에 대한 책임은 회원에게 있습니다.
③ 회원은 당 사이트 및 제 3자의 지적 재산권을 침해해서는 안 됩니다.
제 4 장 서비스의 이용
제 12 조 (서비스 이용 시간)
① 서비스 이용은 당 사이트의 업무상 또는 기술상 특별한 지장이 없는 한 연중무휴, 1일 24시간 운영을
원칙으로 합니다. 단, 당 사이트는 시스템 정기점검, 증설 및 교체를 위해 당 사이트가 정한 날이나 시간에
서비스를 일시 중단할 수 있으며, 예정되어 있는 작업으로 인한 서비스 일시중단은 당 사이트 홈페이지를
통해 사전에 공지합니다.
② 당 사이트는 서비스를 특정범위로 분할하여 각 범위별로 이용가능시간을 별도로 지정할 수 있습니다. 다만
이 경우 그 내용을 공지합니다.
제 13 조 (홈페이지 저작권)
① NDSL에서 제공하는 모든 저작물의 저작권은 원저작자에게 있으며, KISTI는 복제/배포/전송권을 확보하고
있습니다.
② NDSL에서 제공하는 콘텐츠를 상업적 및 기타 영리목적으로 복제/배포/전송할 경우 사전에 KISTI의 허락을
받아야 합니다.
③ NDSL에서 제공하는 콘텐츠를 보도, 비평, 교육, 연구 등을 위하여 정당한 범위 안에서 공정한 관행에
합치되게 인용할 수 있습니다.
④ NDSL에서 제공하는 콘텐츠를 무단 복제, 전송, 배포 기타 저작권법에 위반되는 방법으로 이용할 경우
저작권법 제136조에 따라 5년 이하의 징역 또는 5천만 원 이하의 벌금에 처해질 수 있습니다.
제 14 조 (유료서비스)
① 당 사이트 및 협력기관이 정한 유료서비스(원문복사 등)는 별도로 정해진 바에 따르며, 변경사항은 시행 전에
당 사이트 홈페이지를 통하여 회원에게 공지합니다.
② 유료서비스를 이용하려는 회원은 정해진 요금체계에 따라 요금을 납부해야 합니다.
제 5 장 계약 해지 및 이용 제한
제 15 조 (계약 해지)
회원이 이용계약을 해지하고자 하는 때에는 [가입해지] 메뉴를 이용해 직접 해지해야 합니다.
제 16 조 (서비스 이용제한)
① 당 사이트는 회원이 서비스 이용내용에 있어서 본 약관 제 11조 내용을 위반하거나, 다음 각 호에 해당하는
경우 서비스 이용을 제한할 수 있습니다.
- 2년 이상 서비스를 이용한 적이 없는 경우
- 기타 정상적인 서비스 운영에 방해가 될 경우
② 상기 이용제한 규정에 따라 서비스를 이용하는 회원에게 서비스 이용에 대하여 별도 공지 없이 서비스 이용의
일시정지, 이용계약 해지 할 수 있습니다.
제 17 조 (전자우편주소 수집 금지)
회원은 전자우편주소 추출기 등을 이용하여 전자우편주소를 수집 또는 제3자에게 제공할 수 없습니다.
제 6 장 손해배상 및 기타사항
제 18 조 (손해배상)
당 사이트는 무료로 제공되는 서비스와 관련하여 회원에게 어떠한 손해가 발생하더라도 당 사이트가 고의 또는 과실로 인한 손해발생을 제외하고는 이에 대하여 책임을 부담하지 아니합니다.
제 19 조 (관할 법원)
서비스 이용으로 발생한 분쟁에 대해 소송이 제기되는 경우 민사 소송법상의 관할 법원에 제기합니다.
[부 칙]
1. (시행일) 이 약관은 2016년 9월 5일부터 적용되며, 종전 약관은 본 약관으로 대체되며, 개정된 약관의 적용일 이전 가입자도 개정된 약관의 적용을 받습니다.