• 한국게임학회 논문지
• /
• 제17권6호
• /
• pp.19-28
• /
• 2017

최근 VR(Virtual Reality) 기술을 기반으로 하는 다양한 형태의 가상현실 콘텐츠가 개발되고 있다. 하지만 빠른 속도로 발전하고 있는 가상현실 디바이스 기술에 비해 이러한 디바이스를 적극적으로 활용하는 가상현실 기반 게임 콘텐츠 개발은 부진한 편이다. 본 논문에서는 가상현실 기술을 기반으로 하는 디바이스 중 사용자의 접근성이 높은 HMD(Head Mounted Display) 부착형 모바일 기기를 활용하여 가상현실 노래방을 두 가지 형태의 서로 다른 가상현실 재현방법론(실사기반의 3D 가상현실 공간 생성과 실사기반의 $360^{\circ}$ 영상 방식)으로 개발하고 이에 대한 사용자의 사실감과 몰입감에 대하여 사용자 테스트를 통해 비교 결과를 제시한다. 본 연구진은 논문의 비교 결과가 향후 모바일 기반 가상현실 콘텐츠 개발시 개발 지침으로 활용될 것으로 기대한다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2019년도 하계학술대회
• /
• pp.182-184
• /
• 2019

최근 사용자에게 더욱 몰입감 있는 콘텐츠를 제공하기 위한 기술에 대한 관심이 증가하고 있으며 그 중 가장 대표적인 것이 360 VR 영상이라고 할 수 있다. 미디어 표준화 단체인 MPEG(Moving Picture Experts Group)에서는 MPEG-I(Immersive) 차세대 프로젝트 그룹을 이용하여 이러한 움직임에 대응하고 있다. MPEG-I는 2021년 말 6DoF VR 영상을 목표로 8개의 파트가 표준화를 진행중이다. 360 VR 영상의 경우 획득시 영상의 픽셀들이 3D 공간 상에 존재하게 되는데, 이를 처리 및 출력 하귀 위해서는 2D 영상으로 전환이 필요하며 이 때 사용되는 것이 Projection format이다. 현재 JVET(Joint Video Exploration Team)에서는 3D에서 2D로 전환이 이루어 질 때 손실을 최소화 하기 위한 Projection format들에 대한 연구가 이루어 지고 있다. 본 논문에서는 현재까지 제안된 다양한 Projection format들에 대하여 소개하고 이에 대한 성능 측정 방식에 대하여 소개한다.

• 문화기술의 융합
• /
• 제9권1호
• /
• pp.135-140
• /
• 2023

VR애니메이션은 애니메이션 속 공간에 위치하면서 기존 애니메이션 연출에서 볼 수 없는 360도 화면 연출을 볼 수 있다. 2020년에 제작된 VR 애니메이션 <Goodbye Mr Octopus>는 몰입형 단편 영화로 제77회 베니스 영화제에서 선정되었다. 열여섯 번째 생일을 맞은 사춘기 소녀 스텔라와 엄격한 아버지와의 갈등을 어머니의 편지로 해결되는 이야기이다. 총 11개의 씬으로 구성된 서사로 각 씬에는 시선유도, 시간흐름, 공간전환, 외화면 연출 등 VR영상 문법의 새로운 연출적 요소가 분석되었다. 시선유도 연출은 360도 시선의 불편함을 최소화하였으며, 시간 및 공간전환 연출은 서사적 사건에 따른 관객의 몰입도를 높이고, 외화면 연출은 VR공간의 확장 효과로 분석되었다.

• 방송공학회논문지
• /
• 제22권3호
• /
• pp.401-404
• /
• 2017

360 VR 영상은 등장방형 또는 정육면체, 정십이면체 등의 입체 도형의 전개도 형태의 포맷을 가진다. 이러한 포맷들은 각각 다른 특성을 가지고 있지만, 공통적으로 해상도가 일반 2D 영상에 비해 높다는 공통점을 가지고 있다. 따라서 부호화/복호화를 할 때 시간이 많이 걸리며, 병렬 처리가 필수적으로 요구된다. 최신 2D 비디오 코덱인 HEVC에는 병렬화 기술로 Wavefront Parallel Processing(WPP) 기술이 표준으로 적용되어 있는데, 이 기술은 2D 영상을 고려하여 만들어진 기술으로 3D 영상에서 사용했을 때 최적의 성능을 보이지 않는다. 따라서, WPP를 3D 영상에 적절한 방법이 필요하며 본 논문에서는 큐브맵 포맷에서 개선된 WPP 부호화/복호화 방법을 제안한다. 실험은 HEVC 참조 소프트웨어인 HM 12.0에 적용하였고, 실험 결과 기존 WPP와 비교하여 PSNR에는 큰 손실이 없으며 15%~20% 정도의 부호화 복잡도가 추가로 감소했다. 제안하는 방법은 향후 3D VR 영상을 위한 코덱에 필수적으로 포함될 것으로 기대된다.

• 방송공학회논문지
• /
• 제24권6호
• /
• pp.948-955
• /
• 2019

360도 VR(Virtual Reality) 비디오 서비스에 대한 관심이 증가함에 따라서 대용량의 VR 비디오 데이터를 압축하여 전송하기 위한 기술이 빠르게 발전하고 있다. QER(Quality Emphasized Region) 기반의 전송 기법은 360도 VR 영상을 영역별로 나누고 차별화된 화질의 영상으로 전송함으로써 몰입감을 유지하고 대역폭의 낭비를 줄이는 뷰포트 적응적 360도 비디오 스트리밍 시스템(Viewport-Adaptive 360-Degree Video Streaming System)의 일종으로 개발되었다. 사용자 시점에 해당하는 특정 QER을 선택하기 위해서는 QEC(Quality Emphasis Center) 거리 계산 과정과 QER 전환을 요청하는 시그널링 과정이 필요하다. QEC 거리계산은 QER의 개수만큼 계산을 반복하기 때문에 클라이언트에게 높은 계산 복잡도를 요구한다. 또한 QER 전환 요청을 위한 시그널링 메시지의 전송 주기는 효율적 대역폭 사용과 원활한 QER 전환 사이에서 서로 절충적인(trade off) 관계를 갖는다. 본 논문에서는 이러한 문제를 해결하기 위해 MMT 프로토콜 기반의 개선된 QER 선택 알고리듬을 제안한다. 개선된 QER 선택 알고리듬은 미리 준비된 QER_ID_MAP을 사용하여 시스템 계산 복잡도를 줄이는 동시에, 시그널링 주기를 적응적으로 수정하여 네트워크의 부담을 최소화하고 적시에 적절하게 QER 변환이 가능하도록 제안된 방법이다.

• 디지털융복합연구
• /
• 제15권11호
• /
• pp.463-470
• /
• 2017

VR 영상을 활용한 가상현실 콘텐츠는 제작의 용이성과 사용자 편의성으로 인해 주목받고 있으나 상호작용이 결여된 상태이기 때문에 응용 분야와 활용성에 있어서 한계가 있다. 본 연구에서는 이러한 문제점을 극복하고자 360도 파노라마 영상과 게임엔진을 활용하여 상호작용이 가능한 고해상도 VR 서비스를 구축하는 방안을 제시한다. 특히 복잡한 연산이 소요되는 배경 영상은 파노라마 영상으로 미리 렌더링하여 생성한 것이므로 낮은 사양의 단말기에서도 높은 프레임 수를 유지하면서 서비스를 제공할 수 있는 특징이 있으며, 사용자의 시점과 움직임에 반응하여 고해상도의 배경영상을 발췌하여 보여주기 때문에 상당한 몰입감을 구현할 수 있다. 본 제안 방법의 효과성을 보이기 위해 가상 동물원 환경을 VR로 구성하여 보았으며 사용자의 상호작용과 몰입감을 증대시킬 수 있음을 보이기 위해 상호작용 게임을 사례로 보인다.

• 방송공학회논문지
• /
• 제23권5호
• /
• pp.656-668
• /
• 2018

스티칭 기술은 고화질의 360 VR 영상을 제작하는 과정에서 가장 중요한 요소 기술들 중의 하나이다. 스티칭 기술의 성능을 저하시키는 원인들에는 특징점 추출 과정의 오류, seam finding 과정에서 사용되는 마스크의 왜곡으로 발생하는 오류, 각 영상들의 밝기 보상 오류 등 다양한 원인들이 존재한다. 본 논문에서는 합성되는 각 영상들 간의 시차(View Disparity)가 존재함으로써 스티칭 성능이 저하되는 현상을 분석하고, 이 문제를 해결하기 위해 이음부 탐색(seam finding)의 전처리 과정에서 사용되는 효율적인 알고리즘을 제안한다. 본 논문에서 제안하는 기술을 통해 기존 방법보다 개선된 마스크들을 제작하여 효율적인 이음부 탐색(seam finding)이 수행되도록 하고, 그 결과 개선된 화질을 갖는 360 VR 영상을 얻을 수 있음을 설명한다. 본 논문에서 실시된 다양한 실험들을 통해, 제안된 기술이 시차 왜곡이 존재하는 영상 신호들을 합성하는 과정에 효율적이면서 동작 복잡도도 높지 않음을 보이고 있다.

• 디지털융복합연구
• /
• 제17권1호
• /
• pp.295-300
• /
• 2019

현대 사회는 융합의 시대이며, 스토리텔링에 있어서도 감성적 이야기와 정보라는 두 가지 유형의 데이터 타입 형태가 융합된 스토리텔링의 필요성이 요구되어지고 있다. 특히, VR 콘텐츠의 경우, $360^{\circ}$ 공간을 자유롭게 탐색하는 과정을 통해서 정보를 선택하는 등, 사용자가 콘텐츠에 직접적으로 관여하게 되며, 이에 즉각적으로 대응할 수 있는 인터랙션(Interaction-상호작용)이 이루어져야 한다. 따라서 기존의 스토리텔링 방식으로의 접근으로는 한계가 있으며, 감성과 정보의 두 영역을 충족시키는 '융합형 스토리텔링'의 구현이 절실한 장르라고 판단되어 진다. 본 논문에서는 VR 콘텐츠의 이해에 있어 특히 공간적 특성을 위주로 살펴본 후, VR 콘텐츠에서 '융합형 스토리텔링'을 효과적으로 구현하기 위한 방안으로, 콘텐츠의 스토리 구조 유형에 대한 고찰을 통하여 VR 콘텐츠에 적합한 스토리텔링 유형을 서클(Circle) 구조로 정리하여 맞춤 시스템을 제안한다. 이를 토대로, 향후에는 진정한 4차 산업혁명 시대의 VR 콘텐츠와 인터랙션을 위한 컨텍스트(context) 인식 과정을 활용하여 기술이 감성과 정보의 두 가지 영역을 충족시키는 개인 맞춤형 시스템의 연구로 발전되어질 것을 기대한다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2017년도 추계학술대회
• /
• pp.200-201
• /
• 2017

본 논문은 파노라마 이미지로 구현된 VR Scene들을 연결해 더욱 실감 나는 가상현실 환경을 제공하는 방법을 제안한다. 특히 게임 개발 엔진인 "유니티" 안에서 자율적으로 시점, 공간이동이 가능한 캐릭터를 통해 사용자가 가상현실 환경에 더욱 몰입할 수 있게 VR 프로그램을 구현하였다. 사용자가 실제와 흡사한 가상 환경 속에서 자율적으로 움직일 수 있는 콘텐츠는 VR 시장에서 난제이자 꼭 해결해야 할 Killer contents로 여겨지고 있다. 따라서 본 논문에서 제안하는 내용은 실제 이미지로 구현된 VR 환경에서 컨트롤러를 통해 자율적으로 시점, 공간 이동을 할 수 있으므로 VR 산업에서 주요 관심사로 주목될 것으로 예상한다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2016년도 춘계학술발표대회
• /
• pp.171-174
• /
• 2016

2016년 CES(Consumer Electronic Show)의 가장 큰 이슈는 드론과 VR이었다. 드론을 사용한 다양한 산업 기술의 발전과 VR을 사용한 새로운 시각효과는 사람들에게 많은 관심을 불러일으켰다. 드론과 VR의 영상기술의 발전과 발맞추어 액션 카메라와 360도 카메라의 기술도 발달하고 있다. 본 논문에서는 Drone과 360도 카메라, VR을 사용한 드론뷰 콘텐츠를 설계한다. 드론뷰 콘텐츠란 드론을 사용하여 로드뷰를 촬영하는 것을 의미한다. 드론뷰 콘텐츠를 활용한 시스템은 사용자가 지도상에서 찾고자 하는 지점의 좌표나 주소를 입력하면 모바일과 VR을 통해 해당 위치의 영상정보를 보여줄 수 있다. 또한 본 논문에서는 naver, daum, google에서 제공하는 기존의 국내 로드뷰 서비스와는 차별화된 해당 콘텐츠의 특징에 대해 기술하였다. 마지막으로 해당 시스템의 구현방법에 대해 설명하며, 시스템의 차후 확장성에 대해 연구하였다.