• Asia-pacific Journal of Multimedia Services Convergent with Art, Humanities, and Sociology
• /
• v.6 no.4
• /
• pp.31-40
• /
• 2016

Recently, technology of Virtual Reality(VR) based on HMD among various kinds of VR implemented products has received widespread attention. Major IT-related companies around the world participated in VR HMD research and development. Therefore, the possibility of the spread of VR HMD has been highly praised. Demands of VR HMD products using Smart Phone has been especially increased so that it is required to create a high quality of VR contents. The purpose of study in this paper is to apply the depth value of stereoscopic to VR HMD. To implement it, we analyzed VR HMD optical system and converted an experimental image to virtual depth caused by binocular disparity based on the result of calculating NPP(Native Pixel Parallax). We produced the image of stereoscopic applied with the value converted and applied to VR HMD. This study is expected to be utilized as a VR content creation field of quantitative data.

• KSCI Review
• /
• v.31 no.1
• /
• pp.1-7
• /
• 2023

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2018.06a
• /
• pp.96-99
• /
• 2018

최근 초고화질 영상뿐만 아니라 360 비디오 콘텐츠의 보급이 확산되고 있다. 이미 대중적으로 보급된 스마트폰을 통해 누구나 쉽게 이 360 비디오 콘텐츠를 접할 수 있는데, 스마트폰의 성능은 제한적일 수 밖에 없다. 따라서 본 논문은 모바일 VR 에서 360 비디오 병렬처리를 수행할 때 보다 적합한 최적화 방법 2 가지를 소개한다. 이를 위해 전력 소모를 줄이는 장점으로 인해 모바일 디바이스에 많이 사용되는 비대칭 멀티코어의 특징을 활용한다. 두 방법 모두 공통적으로 각 코어의 성능비와 할당되는 작업량을 비례하게 하여 디코딩 작업의 시간을 줄이는 방법들이다. 첫 번째 방법은 영상을 타일로 분할할 때 각 코어의 성능비와 비례하게 분할하는 방법이다. 해당 기법을 적용하기 위해서, 비디오 크기별 연산 복잡도 분석 모델을 활용하여 사용한다. 제안하는 기법을 사용한 실험 결과, 평균적으로 약 25%의 디코딩 시간 개선을 보였다. 두 번째 방법은 타일로 분할된 영상의 각 복잡도 정도를 PU 의 양으로 추정하여, 각 코어의 성능비와 비례하게 코어에 할당하는 방법이다. 해당 기법을 사용하기 위해서, PU 의 양과 연산 복잡도 정도의 상관관계를 회귀분석하여 이를 이용한다. 제안하는 기법을 사용한 실험 결과, 약 9~16%의 디코딩 시간 개선을 보였다.

• Journal of the Korea Computer Graphics Society
• /
• v.28 no.3
• /
• pp.67-77
• /
• 2022

The sense of touch by natural wind is one of the most common feels that every person experiences in daily life. However, it has been rarely studied how natural wind can be reproduced in a VR environment and whether the multisensory contents equipped with artificial winds do improve human emotion or not. To address these issues, we first propose a wind reproduction VR system guided by video and wind capture data and also study the effect of the system on positive affect. We collected wind direction and speed data together with a 360-degree video on a yacht. These pieces of data were used to produce a multisensory VR environment by our wind reproduction VR system. 19 college students participated in the experiments, where the Korean version of Positive and Negative Affect Schedule (K-PANAS) was introduced to measure their emotions. Through the K-PANAS, we found that 'inspired' and 'active' emotions increase significantly after experiencing the yacht VR contents with artificial wind. Our experimental results also show that another emotion, 'interested', is most notably affected depending on the presence of the wind. The presented system can be effectively used in various VR applications such as interactive media and experiential contents.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2022.11a
• /
• pp.800-802
• /
• 2022

최근 성인들을 위한 '키덜트 장난감'의 관심도가 증가하고 있다. 그중 높은 매출을 보이는 RC 카와 VR 의 콘텐츠 부족 및 대중화 문제를 해결하면 시장규모를 성장시킬 수 있다고 판단한다. 본 논문은 차별화된 RC 카 레이싱 게임 개발을 목표로 한다. 스마트폰용 VR 기기를 착용해 영상을 보며 컨트롤러로 RC 카를 조종한다. 또한 실시간 객체 검출이 가능한 YOLOv5 를 활용해 표지판 인식 및 바운딩 박스, 표지판 라벨, 라벨 음성 출력 기능과 오픈 소스 기반 실시간 컴퓨터 비전인 OpenCV 기반 알고리즘을 활용하여 차선을 인식해 이를 기반으로 영상 처리를 거쳐 가상 차선 및 가상 트랙을 출력한다. 결론적으로 RC 카와 VR 로 구현하여 이를 통해 부족한 VR 컨텐츠를 추가하고 접근성을 강화한다.

• Journal of Digital Convergence
• /
• v.15 no.12
• /
• pp.543-548
• /
• 2017

$360^{\circ}$panoramic image can give people an unprecedented visual experience, and there are many different ways to make a $360^{\circ}$panoramic image. In this paper, we will introduce two easy and effective methods from those many ways. The first one is through 48 photos to make a $360^{\circ}$panoramic image, the second way is through 6 photos to make a $360^{\circ}$panoramic image. We will compare those methods and tell the audience which one suits themselves. Through those easy design methods introduced above, we can see VR works design became easy and popular, normal people can also make $360^{\circ}$panoramic image, and it promotes the industry of VR image contents.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2021.06a
• /
• pp.331-334
• /
• 2021

가상 현실(VR: Virtual Reality) 기술은 대표적인 몰입형 미디어 기술로써, 컴퓨터 등을 통해 인공적으로 만들어낸 실제와 유사한 특정 환경, 상황 혹은 그 기술 자체를 의미한다. VR 기술은 비교적 간단한 장비를 착용한 것만으로 가상 세계에 구현된 모든 공간을 체험할 수 있기 때문에 사용자가 신체적 불편하더라도 손쉽게 유명 관광 명소를 여행할 수 있다. 또한, 실제 작전지역을 가상 세계에 반영함으로써, 가상 세계에서 안전한 군사 훈련이 가능하다. 이와 같은 활용을 가능하게 하기 위해서는 가상 세계의 배경 정보가 실제 세계의 모습과 흡사한 실사 그래픽으로 구성되어야 한다. 그러나 실사 그래픽을 제작하는 것은 제작 난이도가 높고 제작비용이 비싸다는 제한 사항으로 인하여 실사 그래픽을 바탕으로 한 VR 콘텐츠의 수는 부족하다. 이에 본 논문에서는 일반 카메라를 통해서 촬영한 단일 영상 또는 다시점 영상을 통해서 Point Cloud 데이터를 생성하고, 이를 가상 세계의 배경 정보로 활용하기 위한 방법을 제안하고자 한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.10-13
• /
• 2020

최근 초고화질 영상, 가상현실 등 프리미엄 콘텐츠에 대한 요구가 커지면서 360° VR과 8K TV 등의 시장이 확대되고 있다. 360° VR 영상을 만드는 데에 스티칭 기술이 사용되고 있고, 8K 영상을 촬영할 수 있는 장비는 매우 제한적이기 때문에 스티칭 기술을 통해 콘텐츠를 확보하려는 노력이 이어지고 있다. 스티칭 기술은 여러 영상을 합성하여 기존 카메라의 좁은 시야각 문제를 해결하고 보다 넓은 시야각의 영상을 만드는 기술이다. 최근에는 해당 분야에 관한 연구가 진행됨에 따라 이미지를 넘어 동영상 스티칭에 대한 연구가 주로 진행되고 있다, 기존 동영상 스티칭 방식은 이미지 스티칭 방식을 프레임마다 반복하기 때문에 시간이 오래 걸린다는 단점이 있다. 컴퓨터 비전 분야에서는 딥러닝을 활용하여 객체가 존재할 것으로 예측되는 부분에 사각형 모양의 경계 상자(Bounding box)를 생성하는 객체 탐지(Object detection) 분야에 관한 많은 연구가 이루어져 왔고 이를 기반으로 객체의 경계선을 검출하여 해당 영역만을 구분하는 객체 분할(Instance segmentation)에 대한 연구 또한 진행 중이다. 본 논문에서는 앞서 말한 스티칭 속도 문제를 해결하기 위하여 빠른 속도로 객체 분할이 가능한 YOLACT를 이용하여 스티칭 속도를 개선하는 방안을 제안한다.

• Journal of the Korea Convergence Society
• /
• v.8 no.5
• /
• pp.145-153
• /
• 2017

As success stories of using virtual reality (VR) have become more prevalent, interest in performance-related technology has rapidly increased around the world. Performances such as, Cirque du Soleil had much success in using video technology, these VR applications have enabled experiences using digital image technology. However, critics have claimed that the completeness and diversity of visual content is reduced, due to insufficient storylines, spatial composition, and partial use of the entire visual field. Therefore, the design of a performance using digital image technology should consider the characteristics of the production stage to be different from real world performances. In this study, the visual space of the stage, the method of creating space for the stage, and the movement of the performer and utilization of the performance was analyzed. Through this, It transferred the limitation of the traditional stage into the space and time of the image and opened the possibilities of the tran­-media.

• Journal of Broadcast Engineering
• /
• v.23 no.1
• /
• pp.63-73
• /
• 2018

These days, VR contents are created in three ways: CG based method, game engine based method, and live action shooting method. The most universal method is live action shooting. So far, most live actions are shot with action cams. Therefore, this method is different from professional image production method for movies and TV dramas. This study tries to point out the difference between professional image production method and action cam based shooting method, and proposes an alternative. The proposed method is log shooting based HDR filming and editing. As the result of test shooting and editing, the proposed method was able to obtain more color information than conventional action cam based shooting method and thereby to implement high-definition images which are hard in an action cam.