• 디지털산업정보학회논문지
• /
• 제20권2호
• /
• pp.27-36
• /
• 2024

Accidents or disease can lead to acquired voice dysphonia. In this case, we propose a new input interface based on eye movements to facilitate communication for patients. Unlike the existing method that presents the English alphabet as it is, we reorganized the layout of the alphabet to support the Korean alphabet and designed it so that patients can enter words by themselves using only eye movements, gaze, and blinking. The proposed interface not only reduces fatigue by minimizing eye movements, but also allows for easy and quick input through an intuitive arrangement. For natural communication, we also implemented a system that allows patients who are unable to speak to communicate with their own voice. The system works by tracking eye movements to record what the patient is trying to say, then using Glow-TTS and Multi-band MelGAN to reconstruct their own voice using the learned voice to output sound.

• 감성과학
• /
• 제20권1호
• /
• pp.31-40
• /
• 2017

이 연구는 뉴로 마케팅의 여러 연구 기법들 중 시선추적 기술(Eye-tracking)을 이용하여 농구 경기 장면 중 남성의 동공이 전체 데이터의 3시그마 범위를 벗어난 상위 0.135 % 비율로 동공이 확장 되었을 때의 시선 관찰 및 관심도를 측정하였다. 특히 동공 크기 확장과 관련해서 시선추적 기술의 데이터 중 어느 정도의 범위일 때의 크기가 유의미하다고 밝히기는 힘들기 때문에 이 연구에서는 전체 데이터 중 상위 3시그마 범위를 동공이 확장되어지는 범위로 설정하였다. 실험에 사용된 장면은 농구 경기 중 한 상황으로 설정하였으며, 총 7,200개의 데이터 중 유효율 90 %가 넘는 유효데이터가 산출되었고 이를 통해 34명의 데이터 중 유효데이터에 해당하지 않아 사용할 수 없는 데이터를 제외한 29명의 데이터를 사용하였다. 동공의 크기를 구하기 위해 동공의 너비(Pupil Width)와 높이(Pupil Height) 값을 [동공의 크기 = 동공의 너비/2${\times}$동공의 높이/$2{\times}{\pi}$] 공식에 대입하였다. 분석한 결과 농구경기장 내 마케팅으로 활용되기 위해 사용된 광고판들은 크게 영향력을 끼치지 않았다. 관중으로서의 피험자들의 동공의 크기가 커졌을 때, 경기장내에 광고판 보다는 선수들 혹은 주변 배경에 주시빈도가 높았다. 이 연구를 통하여 무분별하게 광고판을 사용하기보다는 뉴로마케팅을 이용하여 경기장내 마케팅 및 광고판 효용성을 높이는 방안의 필요성이 요구된다.

• 정보처리학회논문지B
• /
• 제12B권4호
• /
• pp.465-472
• /
• 2005

본 논문에서는 HMD(Head Mounted Display) 하단에 눈동자의 움직임 영상을 취득할 수 있는 USB 카메라를 부착한 후, 3차원 1인칭 슈팅(First Person Shooting) 게임에서 게임 캐릭터의 시선방향을 눈동자 움직임에 의해 조작하는 방법을 제안한다. 본 논문에서 제안하는 방법은 다음과 같은 3부분으로 이루어져 있다. 첫 번째는 입력 영상으로부터 눈동자의 중심 위치를 실시간 영상 처리 방법으로 추출하는 부분, 두번째는 HMD 모니터상의 임의 지점을 쳐다볼 때 추출된 눈동자의 위치 정보와 모니터상의 응시 지점사이의 기하학적인 연관관계를 결정하는 캘리브레이션 부분, 그리고 마지막은 캘리브레이션 정보를 기반으로 모니터 상의 최종적인 응시 위치를 결정하고 이 정보에 의해 게임상의 3차원 뷰 방향을 조정하는 부분으로 구성되어 있다. 실험 결과 본 논문의 방법에 의해 손이 불편한 사용자에게 게임을 즐길 수 있는 기회를 제공하고, 게임 캐릭터와 게임 사용자의 시선 방향을 일치시킴으로서 게임의 흥미와 몰입감을 증가시킬 수 있는 결과를 얻음을 알 수 있었다.

• 한국산학기술학회논문지
• /
• 제8권2호
• /
• pp.240-244
• /
• 2007

본 논문에서는 실시간으로 눈을 검출하고 추적하는 새로운 방법을 제안하고자 한다. 기존의 능동적 적외선을 이용한 눈 검출 및 추적 방법은 외부의 조명에 매우 민감하게 반응하는 문제점을 가지고 있으므로, 본 논문에서는 적외선 조명을 이용한 밝은 동공 효과와 전형적인 외형을 기반으로 한 사물 인식 기술을 결합하여 외부 조명의 간섭으로 밝은 동공 효과가 나타나지 않는 경우에도 견실하게 눈을 검출하고 추적 할 수 있는 방법을 제안한다. 눈 검출과 추적을 위해 SVM과 평균 이동 추적방법을 사용하였고, 적외선 조명과 카메라를 포함한 영상 획득 장치를 구성하여 제안된 방법이 효율적으로 다양한 조명하에서 눈 검출과 추적을 할 수 있음을 보여 주었다.

• 한국멀티미디어학회논문지
• /
• 제23권9호
• /
• pp.1210-1218
• /
• 2020

This study selected brand logos of six South Korean and Chinese banks including KB, IBK, SH, ICBC, ABC, and SISB, conducted Eye Tracking experiment among 36 South Korean and Chinese university students(Nine male and female students, respectively), and analyzed the difference of visual attention of consumers on bank brand logo, symbol, Korean/Chinese character logo types as well as the difference of visual attention of these consumers on English logo types. Results were represented by using statistics and visualization including GAZEPLOT, HEATMAP, and visual expression. Results showed that most generally gazed logo types more often and longer than symbols when they watched bank brand logos. A slight difference was observed between both groups in terms of gazing English logo types. This study has a implication that it proposed the possibility of drawing quantitative and reliable outcomes by utilizing eye tracking device and approaching in an objective standpoint beyond a methodological aspect on bank brand logo primarily leaning over the analysis of case research or design development. Moreover, findings are expected to serve as basic data for proposing the direction of special bank brand logo design and marketing strategies.

• 한국식품저장유통학회지
• /
• 제31권3호
• /
• pp.408-422
• /
• 2024

This study analyzed the factors that influence menu choices through eye-tracking and questionnaires in menu design. Demographic data of subjects coincided with choosing a menu and eye-tracking data. Hot Crispy Chicken Burger is the most popular menu. The study found that regardless of the selected menu, the menu name (35.5 seconds), price (21.6 seconds), and image (16.0 seconds) were viewed the longest, followed by country of origin (8.81 seconds), calories (4.6 seconds), and special indications (p<0.05). The menu name and image were checked more frequently, while calorie information was checked less often. As a result of analyzing various factors that influence menu selection through, Consumer experience and image greatly influenced menu choices. Therefore, if you want to receive a menu selection, it is considered effective to make good use of the menu name and image. In results of principal component analysis (PCA) by gender showed. Men had the longest price in the fixation duration. But, for females, there was a significant difference in gaze fixation when they took the exam, with menu names and special indications being important selection criteria. Since the results show that selection criteria and information acquisition methods differ depending on gender, this research is thought to be able to suggest directions for menu design.

• 한국정보통신학회:학술대회논문집
• /
• 한국정보통신학회 2012년도 춘계학술대회
• /
• pp.750-753
• /
• 2012

본 논문은 얼굴에서 왼쪽 눈, 오른쪽 눈, 입, 코의 위치를 검출하고 POSIT(Pose from Orthography and Scaling with ITterations) 알고리즘을 이용하여 3차원 객체의 위치와 방향을 알아내는 방법을 제안한다. 왼쪽, 오른쪽 눈을 검출하는 단계에서는 사람의 얼굴에서 눈이 가지는 위상학적 특징과 형태학적 특징을 이용한다. 위상학적 특징을 기반으로 눈의 대략적인 위치를 구하고 형태학적인 특징을 이용하여 눈동자를 검출한다. 4개의 특징점 검출 후 POSTIT를 이용하여 얼굴의 회전 정도를 찾아 눈의 시선 방향을 찾았다.

• 대한전자공학회논문지SP
• /
• 제45권2호
• /
• pp.49-64
• /
• 2008

최근에 휴먼 컴퓨터 인터페이스 분야에서 사용자의 시선 위치를 파악하여 더욱 편리한 입력장치를 구축하고자 하는 연구가 많이 진행되고 있다. 하지만 복잡한 하드웨어 구성으로 제품의 가격이 매우 비싸고, 까다로운 사용자 캘리브레이션 과정으로 인해 시스템의 사용에 어려움을 겪는다. 본 논문에서는 HMD(Head Mounted Display)에 USB 카메라와 적외선을 반사시키는 hot-mirror와 적외선 조명을 이용한 시선 추적 모듈을 부착하고, 이를 통해 획득한 눈 영상의 2차원적인 분석과 간단한 사용자 캘리브레이션 과정을 통해 시선 위치를 파악하는 방법을 제안한다. HMD는 사용자의 얼굴 움직임과 함께 움직이므로, 얼굴움직임에 영향을 받지 않는 시선 추적 시스템을 구현할 수 있다. 또한, 시선 추적 시스템을 3차원 1인칭 슈팅 게임에 적응하여, 캐릭터의 시선 방향을 조정하고, 적 캐릭터를 조준하여 사격이 가능하도록 하여, 게임의 몰입감과 흥미성을 높일 수 있게 하였다. 실험 결과, 한 대의 데스크톱 컴퓨터 환경에서 게임과 시선 추적 시스템이 실시간으로 동작 가능했으며, 약 $0.88^{\circ}$의 시선 위치 추출 오차를 보였다. 또한 3차원 1인칭 슈팅게임에서 일반 마우스의 역할을 시선 추적 시스템이 문제없이 대신할 수 있음을 확인하였다.

• 한국HCI학회논문지
• /
• 제12권4호
• /
• pp.37-44
• /
• 2017

Eye-typing은 인간-컴퓨터 상호작용의 일종으로 시선의 위치 정보를 기반으로 하는 입력 체계이다. 눈동자의 움직임 이외의 물리적 행위를 필요로 하지 않아 거동이 어려운 전신마비 환자들을 위한 입력 수단으로 널리 사용된다. 하지만 eye-typing을 위한 한글 기반의 인터페이스는 거의 제시되지 않은 것이 현실이다. 이에 본 연구에서는 한글 입력에 최적화된 eye-typing 입력 체계를 구현하였다. 우선 큰 잡음과 Midas touch problem으로 대표되는 eye-typing의 특성을 고려하여 설계 목표를 정립하였다. 잡음 문제를 해결하기 위해 개별 버튼의 크기를 극대화하기 위해 단계식 입력 체계를 도입하였고 Midas touch problem을 해결하기 위해 입력 영역 중간에 시선 보류 영역을 두었다. 다음으로 각 음절이 자음과 모음의 조합으로 생성되는 한글의 언어학적 특성에 대한 고찰을 바탕으로 두 종류의 eye-typing 인터페이스를 설계하였다. 각각 자모 일체형, 자모 분리형 인터페이스로 정의한 두 인터페이스는 한글의 자모음을 유형화하여 단계적으로 입력하도록 구현되었다. 그리고 이들의 성능을 검증하기위해 한글 두벌식자판과 비교하고 입력 과정에서 시선의 동선을 분석하는 실험을 수행하였다. 그 결과, 제시한 인터페이스가 실용적인 eye-typing 수단으로 활용될 가능성이 충분함을 확인하였다.

• Nuclear Engineering and Technology
• /
• 제54권4호
• /
• pp.1261-1270
• /
• 2022

This study was conducted to investigate the possibility of using gaze entropy to evaluate an operator's situation awareness in an emergency accident situation of a nuclear power plant. Gaze entropy can be an effective measure for evaluating an operator's situation awareness at a nuclear power plant because it can express gaze movement as a single comprehensive number. In order to determine the relationship between situation awareness and gaze entropy for an emergency accident situation of a nuclear power plant, an experiment was conducted to measure situation awareness and gaze entropy using simulators created for emergency accident situations LOCA, SGTR, SLB, and LOV. The experiment was to judge the accident situation of nuclear power plants presented in the simulator. The results showed that situation awareness and Shannon, dwell time, and Markov entropy had a significant negative correlation, while visual attention entropy (VAE) did not show any significant correlation with situation awareness. The results determined that Shannon entropy, dwell time entropy, and Markov entropy could be used as measures to evaluate situation awareness.