• Journal of Broadcast Engineering
• /
• v.25 no.1
• /
• pp.113-116
• /
• 2020

This paper proposes a Quality of Experience (QoE) evaluation experiment to measure the effects of 360-degree video and sensory effects on the subject's degree of immersion, satisfaction, and sense of presence. The test subject responds to a questionnaire about the degree of immersion, satisfaction, and sense of presence after experiencing a 360-degree video accompanied by sensory effects while wearing a head-mounted display (HMD) with a scent diffusion device. As a result of the response analysis, it was confirmed that the proposed experimental method is suitable for measuring the subject's degree of immersion, satisfaction, and sense of presence about 360-degree video and sensory effects. On the other hand, inserting a gray screen for comparison experiments while watching a 360-degree video was found to cause a significant decrease in immersion and realism.

• The Journal of the Institute of Internet, Broadcasting and Communication
• /
• v.18 no.6
• /
• pp.63-68
• /
• 2018

Offloading is a method of communicating, processing, and receiving results from some of the applications performed on local computers to overcome the limitations of computing resources and computational speed.Recently, it has been applied in mobile games, multimedia data, 360-degree video processing, and image processing for Internet broadcasting to speed up processing and reduce battery consumption in the mobile computing sector. This paper implements a viewer that enables users to convert various flat-panel images and view contents in a wireless Internet environment and presents actual results of an experiment so that users can easily understand the images. The 360 degree spherical image is successfully converted to a plane image with Double Panorama, Quad, Single Rectangle, 360 Overview + 3 Rectangle depending on the image acquisition position of the 360 degree camera through the interface. During the experiment, more than 100 360 degree spherical images were successfully converted into plane images through the interface below.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2020.07a
• /
• pp.419-420
• /
• 2020

본 논문에서는 불법복제 영상 판단을 위한 RGB 변위값 측정을 통한 360도 영상 식별 기준 키 프레임 선정 방법을 제안한다. 방송 프로그램이나 영화 등과 같은 콘텐츠는 인터넷들을 통하여 국내뿐만 아니라 해외로도 대량 불법 유통됨으로써 국가적으로 큰 손실이 발생하고 있다. 본 논문에서는 이러한 불법복제 여부를 빠른 속도로 판단하기 위한 방법으로 360도 영상에서 추출된 각각의 프레임에서 RGB 변위값을 측정하여 동일한 장면으로 인식되는 프레임을 하나로 묶어 해당 장면의 키 프레임으로 선정한다. 본 논문에서 제안한 방법은 불법복제 영상의 판단 시간을 단축시키고 판단 정확도를 향상시킬 수 있는 효과가 있다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2022.07a
• /
• pp.517-518
• /
• 2022

본 논문에서는 360도 카메라기반 식물 전자 상거래서비스 어플을 제안한다. 식물을 이용한 재테크 일명 "식테크"라고 불리는 재테크가 증가하고 있는 추세이다. 현재 다른 중고거래 플랫폼에서는 본 거래가 제안되어 있어 거래가 어렵고 일종의 재테크의 개념이라 전문적으로 거래하기 힘들다는 문제점이 있다. 이를 해결하기 위해 본 프로젝트에서는 실시간 차트를 활용하여 식물 거래가를 알려주고, 360도 카메라와 VR을 활용하여 식물의 육성일기 공유하여 어플 사용자들의 커뮤니티 장소가 되고, 은퇴 후 귀농을 하는 사용자에게는 식물을 잘 기르는 법의 정보를 알 수 있는 다방면에서 활용이 가능하여 여러 문제를 효율적으로 해결할 것으로 기대된다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.6-9
• /
• 2020

최근 몰입형 가상 현실을 제공하기 위한 360 도 영상 전송 기술이 활발히 연구되고 있다. 그러나 현재 가상현실 기기가 가지는 연산 능력 및 대역폭으로는 고화질의 360 도 영상을 전송 및 재생하기에 한계가 있다. 해당 문제점을 극복하기 위해 본 논문에서는 사용자 시점의 고화질 360 도 영상 제공을 위해 사용자 시점 타일을 추출하는 움직임 제한 타일 셋 기반 타일 추출기를 구현한다. Versatile video coding (VVC) 기반 타일 인코더를 이용해 360 도 영상에 대한 비트스트림을 생성한 후, 사용자 시점에 해당하는 타일들을 선택한다. 이후 선택된 타일들은 제안하는 타일 추출기에 의해 추출되고 전송된다. 또한, 전체 360 도 영상에 대한 저화질 비트스트림을 전송하여 갑작스러운 사용자 시점 변경에 대응한다. 제안된 타일 추출기를 기반으로 360 도 영상 전송을 수행하면, 기존 VVC 기반 시스템 대비 대비 평균 24.81%의 bjontegaard delta rate (BD-rate) 감소가 가능함을 확인하였다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2021.06a
• /
• pp.109-111
• /
• 2021

360 도 영상은 기존 미디어와 다른 몰입감을 제공하지만 HMD 기반 시청은 멀미, 신체적 불편함 등을 유발할 수 있다. 또한, 시청 디바이스 보급 문제, 네트워크 대역의 문제, 단일 소스 다중 이용의 수요 등으로 일반 디스플레이 기반 서비스 수요도 존재한다. 본 논문에서는 360 도 영상의 일반 디스플레이 서비스를 위한 뷰포트 추출에 필요한 영상 내 객체의 동적 속성을 활용한 시각적 관심 지도 증강 기법과 이를 이용한 서비스 구조를 제시한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2017.11a
• /
• pp.96-97
• /
• 2017

본 논문에서는 360 도 비디오 서비스를 제공하기 위한 타일기반 실시간 부호화 방법을 제시한다. 360 도 비디오 프레임을 공간적으로 분할하여 타일을 생성하고, GOP 길이만큼의 타일 개수로 구성된 타일 세트들을 순차적으로 부호화함으로써 단일 부호화기로 실시간 타일 부호화가 가능하도록 설계하였다. 상기 타일 세트는 독립적으로 부호화되므로 단말은 사용자의 시청영역에 해당하는 타일 세트만 수신 및 복호화함으로써 네트워크 대역폭을 줄일 수 있다. 또 작은 크기의 타일을 순차적으로 고속 부호화하는 방법이므로 타일의 병렬 처리를 효과적으로 수행하기 위한 로드밸런싱을 고려하지 않아도 된다. NVIDA 그래픽카드인 Geforce GTX 1080Ti를 이용하여 32 개의 타일로 분할된 4K 360 도 비디오 시퀀스를 HEVC 로 부호화할 경우 약 120 fps 의 속도로 처리가 가능함을 확인하였다.

• Journal of Advanced Navigation Technology
• /
• v.27 no.3
• /
• pp.306-313
• /
• 2023

Realistic and graphics-based virtual reality content is based on 360-degree videos, and viewport extraction through the viewer's intention or automatic recommendation function is essential. This paper designs a viewport extraction system based on multiple object tracking in 360-degree videos and proposes a parallel computing structure necessary for multiple viewport extraction. The viewport extraction process in 360-degree videos is parallelized by composing pixel-wise threads, through 3D spherical surface coordinate transformation from ERP coordinates and 2D coordinate transformation of 3D spherical surface coordinates within the viewport. The proposed structure evaluated the computation time for up to 30 viewport extraction processes in aerial 360-degree video sequences and confirmed up to 5240 times acceleration compared to the CPU-based computation time proportional to the number of viewports. When using high-speed I/O or memory buffers that can reduce ERP frame I/O time, viewport extraction time can be further accelerated by 7.82 times. The proposed parallelized viewport extraction structure can be applied to simultaneous multi-access services for 360-degree videos or virtual reality contents and video summarization services for individual users.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2022.07a
• /
• pp.519-521
• /
• 2022

본 논문에서는 교통약자들의 이동제한 및 한계와 코로나 19로 인한 관광산업의 손실을 해결할 VR/360도 가상현실을 통한 웹 플랫폼 개발을 제안한다. 이 연구는 활용될 자원인 계절과 날씨자료를 효율적으로 촬영 및 준비하여 기존의 VR/360도의 가상현실을 최대화하고, 기존의 로드뷰 API 및 VR기기의 응용을 다양화한다. 또한, 이 연구는 '관광지를 방문한다'라는 개념을 실외뿐만이 아니라 실내에서도 사실적으로 체험할 수 있음을 제시한다. 이때 사실적인 체험을 더욱 극대화하기 위하여 VR/360도에 접목된 계절과 날씨의 콘텐츠를 구매할 수 있게 하여 소비자에게 선택지 내에서의 다양성을 주고, 단순 체험이 아닌 관광산업의 경제적 이윤으로 연결한다. 본 논문에서는 예상결과를 통하여 기존의 단순 VR/360도 체험을 통한 가상현실에 비해 좀 더 다양한 환경 조성을 통한 콘텐츠와 관광산업의 개선 및 경제성 면에서 발전성을 보인다.

• Journal of IKEEE
• /
• v.24 no.3
• /
• pp.743-753
• /
• 2020

In this paper, we propose a set of robustness indicators for immersive 360-degree video. With the full-fledged service of mobile carriers' 5G networks, it is possible to use large-capacity, immersive 360-degree videos at high speed anytime, anywhere. Since it can be illegally distributed in web-hard and torrents through DRM dismantling and various video modifications, however, evaluation indicators that can objectively evaluate the filtering performance for copyright protection are required. In this paper, a robustness indicators is proposed that applies the existing 2D Video robustness indicators and considers the projection method and reproduction method, which are the characteristics of Immersive 360-degree Video. The performance evaluation experiment has been carried out for a sample filtering system and it is verified that an excellent recognition rate of 95% or more has been achieved in about 3 second execution time.