• 방송과미디어
• /
• 제23권4호
• /
• pp.67-81
• /
• 2018

최근 영화, 스포츠 중계, 게임 등 다양한 종류의 콘텐츠가 VR 형태로 서비스되고 있는데, 이러한 360도 영상 서비스 환경에서 영상과 오디오를 더욱 실감나게 제공하는 기술에 대한 연구도 많이 이루어지고 있다. 오디오의 경우 스테레오, 5.1 채널 오디오 등과 같은 채널 기반 오디오가 방송, 영화 등에서 주로 사용되었는데, 최근에는 객체 기반 오디오, 장면 기반 오디오 기술의 적용이 시도되고 있다. VR 서비스에서도 더욱 실감 있는 오디오를 제공하기 위하여 이러한 최신 오디오 기술의 적용이 시도되고 있다. 본 고에서는 증강 현실 및 가상 현실에 활용될 수 있는 최신 오디오 기술에 대해 간략하게 살펴보고, 최신 오디오 기술이 어떻게 VR 서비스에 적용이 되고 있는지에 대해 살펴본다. 그리고, VR 서비스를 위한 규격 제정 측면에서 오디오 기술은 어떻게 진행이 되고 있는지에 대하여 간략하게 살펴본다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2013년도 하계학술대회
• /
• pp.101-103
• /
• 2013

최근 HD (High Definition) 또는 3D (Three Dimension) 이상의 고품질 방송 콘텐츠 수요가 증가하면서 디지털 방송 시스템은 실시간으로 실감형 서비스를 제공하기 위하여 발전 하였다. 특히, 세계 방송 비영리 협회 FoBTV (Future of Broadcast Television) 는 더 나아가 초 고해상도 UHD (Ultra High Definition) 급 이상의 영상을 제공하기 위해 지상파 방송과 유선 케이블 방송 시스템을 이용하여 고품질, 다시점 방송 서비스 뿐 아니라 낮은 전계 강도 환경에서 수신율을 높일 수 있는 기술방안을 논의하고 있다. 본 논문은 이와 같은 세계 방송 발전 흐름에 따라 지상파 및 케이블 방송 송수신 시스템을 구현하고 수신되는 영상의 품질을 평가하였다. 또한, 구현된 통합 시스템은 지상파로 수신되는 파일럿 신호의 크기를 분석하여 케이블로 재전송 되며 이를 통해 수신 성능의 품질을 향상시킨다.

• 한국멀티미디어학회:학술대회논문집
• /
• 한국멀티미디어학회 2012년도 춘계학술발표대회논문집
• /
• pp.147-150
• /
• 2012

본 연구에서는 GIS 고도 데이터와 항공 영상 사진 정보를 이용하여 3차원 실감 지형 맵 제작 3D 에디터 개발 연구를 한다. 높이맵 방식을 이용하여 지형을 3차원화시켜 사용자에게 제공하며, 이를 위해 카메라를 기준으로 하여 보여주는 지형의 상세함을 변화시키는 상세도 레벨 설정방식으로 컴퓨터 메모리를 효율적으로 관리 할 수 있도록 하였다. 실제 지형 데이터를 이용하기 때문에 컴퓨터상에서 3차원의 실제 지형을 체험할 수 있으며 에디터 기능을 통하여 고도맵과 영상 사진만으로 간단히 실감 지도를 제작할 수 있도록 하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2012년도 추계학술발표대회
• /
• pp.679-682
• /
• 2012

본 논문은 지능형 실감 통신 서비스를 위해 단순히 영상 데이터만을 상대방에게 전송하는 것이나 영상 내에 포함된 사용자 상황 정보(위치, 얼굴, 문자 등)들을 인식한 후 자연스럽게 사용자 화면상에 오버레이 시키는 증강현실 기반의 상황인식 기술 개발을 위한 방안을 기술한다. 제안한 방안은 사용자 위치 인식 기술, 사용자 인식 기술, 웨어러블 컴퓨팅 기술, 증강현실 기술, 그리고 화질 개선을 위한 에러 은닉 기술들을 기반으로 한 연구이다. 제안한 방안은 향후 이동 통신 환경에서 사용자에게 보다 편리한 정보 제공 환경으로 공함으로써, 도서관이나 박물관 또는 관광지 등에서 사용자에게 쉽게 새로운 정보를 제공하는 수단으로 자리 잡을 수 있을 것이다.

• 한국감성과학회:학술대회논문집
• /
• 한국감성과학회 1998년도 추계학술발표 논문집
• /
• pp.21-24
• /
• 1998

논문은 상대적인 3차원 정보를 추출하기 위하여 스테레오 정합 알고리듬에 에피폴라 기하학을 적용하였다. 카메라로부터 입력받은 영상에서 추출된 특징 점으로부터 에피폴라 기하학 구조를 구성한다. 이렇게 구한 에피폴라 기하학 정보는 스테레오 영상에서의 정합 점들 간의 기하학적인 상관관계를 구성하고 조밀한 변이영상을 추출한다 실험결과를 통하여 제안된 알고리듬이 실제 공간상에서 대상물체를 실감 있게 표현함을 알 수 있다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2020년도 하계학술대회
• /
• pp.144-145
• /
• 2020

본 논문에서는 정밀한 3차원 복원 및 시점 합성을 위해 매칭 비용을 반복적으로 업데이트하는 Generalized Soft 3D Reconstruction (GenSoft3D) 알고리즘을 제안한다. 먼저 다시점 영상들과 카메라 자세정보가 주어지면 GenSoft3D는 볼륨 기반의 다시점 스테레오 매칭 알고리즘으로 시점별 초기 매칭 비용 볼륨 및 시차 맵을 계산한다. 그 후 정제 과정에서 각 시점은 모든 시차 맵을 이용하여 표면 확률 및 가시 확률을 계산한다. 표면 확률은 초기 매칭 비용 업데이트에 사용하며, 가시 확률은 폐색 영역의 정확한 시차를 계산하기 위해 사용된다. 해당 정제 과정을 일정 횟수 반복할 경우 시점별 고정밀의 시차 맵 획득이 가능하다. 또한 시차 맵의 정확도가 향상됨에 따라 정확한 시점 합성이 가능하다.

• 한국정보과학회논문지:소프트웨어및응용
• /
• 제34권1호
• /
• pp.79-94
• /
• 2007

언제, 어디서, 누구나 대용량 네트워크를 사용할 수 있는 유비쿼터스(ubiquitous) 시대가 다가오면서, 카메라가 장착되어 있고 무선 통신이 가능한 PDA, 웨어러블(wearable) 컴퓨터와 같은 휴대용 장치가 가까운 미래에는 일상의 한 부분이 될 것이다. 이런 상황을 반영하듯, 휴대용 장치를 이용한 실감형 게임(augmented game)에 관한 다양한 연구가 진행되어 왔다. 기존의 실감형 게임들은 전통적으로 'backpack' 시스템이나 패턴마커(pattern marker)를 이용하였다. 'backpack' 시스템은 비싸고, 거추장스러우며, 사용하기 불편한 단점이 있으며, 패턴마커를 사용하면 미리 정한 장소에서만 게임을 해야 하는 단점을 가지고 있다. 본 논문에서 소개하는 게임 Flying Cake는 거추장스러운 장비 대신, 가볍고 휴대 가능한 PDA를 이용하며, 실제 세계에서 가상의 물체를 접목(overlay)하기 위해, 수동적인 패턴마커 대신 얼굴 영역을 이용한다. Flying Cake는 PDA만을 이용하여 실제 세계를 돌아다니며 카메라에 의해 입력된 영상에 접목된 가상의 캐릭터를 공격하는 일인용과 무선 랜을 통해 전송되는 상대방의 영상에 접목된 가상의 캐릭터를 공격하는 이인용을 제공하는 실감형 슈팅 게임이다. 얼굴 추출 기술을 이용하여 입력 영상의 얼굴영역에 가상의 캐릭터를 접목하며, 사용자는 가상의 캐릭터를 공격하며 게임을 즐긴다. Flying Cake는 얼굴 추출 기술을 이용하여 PDA카메라를 통해 입력된 실제 세계와 가상의 물체 사이의 상호작용을 제공하는 새로운 패러다임(paradigm)을 제공함으로써 사용자에게 새로운 즐거움을 제공할 것이다.

• 한국재난관리표준학회지
• /
• 제3권2호
• /
• pp.3-7
• /
• 2010

• 정보과학회지
• /
• 제29권12호
• /
• pp.17-23
• /
• 2011

• 한국통신학회논문지
• /
• 제37권4C호
• /
• pp.277-282
• /
• 2012

본 논문에서는 실감 원격 영상회의를 위한 시선 맞춤 시스템을 제안한다. 제안하는 방법은 적외선 구조광을 사용하는 Kinect 깊이 카메라를 이용해서 색상 영상과 깊이 영상을 획득하고, 깊이 영상을 이용해서 사용자를 배경으로부터 분리한다. 깊이 카메라로부터 획득한 가공되지 않은 깊이 영상은 다양한 형태의 잡음을 가지고 있기 때문에, 첫번째 전처리 과정으로 결합형 양방향 필터를 사용해서 잡음을 제거한다. 그 다음, 깊이값의 불연속성에 적응적인 저역 필터를 적용한다. 색상 영상과 전처리 과정을 거친 깊이 영상을 이용해서 우리는 가상시점에서의 화자를 3차원 모델로 복원한다. 전체 시스템은 GPU 기반의 병렬 프로그래밍을 통해 실시간 처리가 가능하도록 했다. 최종적으로, 우리는 시선이 조정된 원격의 화자 영상을 얻을 수 있게 된다. 실험 결과를 통해 제안하는 시스템이 자연스러운 화자간 시선 맞춤을 실시간으로 가능하게 하는 것을 확인했다.