• Journal of Multimedia Information System
• /
• 제8권2호
• /
• pp.85-92
• /
• 2021

In a face, there is much information of person's identity. Because of this property, various tasks such as expression recognition, identity recognition and deepfake have been actively conducted. Most of them use the exact frontal view of the given face. However, various directions of the face can be observed rather than the exact frontal image in real situation. The profile (side view) lacks information when comparing with the frontal view image. Therefore, if we can generate the frontal face from other directions, we can obtain more information on the given face. In this paper, we propose a combined style model based the conditional generative adversarial network (cGAN) for generating the frontal face from multi-view images that consist of characteristics that not only includes the style around the face (hair and beard) but also detailed areas (eye, nose, and mouth).

• 전자공학회논문지CI
• /
• 제44권1호
• /
• pp.56-63
• /
• 2007

본 논문은 신경망 (neural network: NN)과 mean-shift알고리즘을 이용하여 복잡한 배경에서 사용자의 눈을 정확히 추출하고 추적할 수 있는 눈 추적 시스템을 제안한다. 머리의 움직임에 강건한 시스템을 개발하기 위해서 먼저 피부색 모델과 연결 성분분석을 이용하여 얼굴영역을 추출한다. 그 다음 신경망기반의 텍스처 분류기를 이용하여 얼굴 영역(face region)을 눈 영역(eye region)과 비눈 영역(non-eye region)으로 구분함으로써 눈을 찾는다. 이러한 눈 검출 방법은 안경의 착용 유무에 상관없이 사용자의 눈 영역을 정확히 검출 할 수 있게 한다. 일단 눈 영역이 찾아지면 이후 프레임에서의 눈 영역은 mean-shift알고리즘에 의해 정확하게 추적된다. 제안된 시스템의 효율성을 검증하기 위해서 제안된 시스템은 눈의 움직임을 이용한 인터페이스 시스템에 적용되었고, 이 인터페이스를 이용한 'aliens game'이 구현되었다. 25명의 사용자에 대해 실험한 결과는 제안된 시스템이 보다 편리하고 친숙한 인터페이스로 활용될 수 있다는 것을 보여주었으며, 또한 $320{\times}240$ 크기의 영상을 초당 30프레임의 빠른 속도로 처리함으로써 실시간 시스템에 적용될 수 있음을 보여주었다.

• 한국생활과학회지
• /
• 제24권3호
• /
• pp.407-421
• /
• 2015

This study examined the pixel's expression trend and nature featured in contemporary fashion, which works as a basic unit symbolizing the digital image, paying attention to its formativeness. The work through this process aimed at suggesting an opportunity for recognition about pixel image utilized as a formative component beyond its simple meaning of unit and providing the fundamental materials for usage in creative fashion design reflecting the digital emotion in the future, In research method, literature review was followed on pixel and the empirical study about its image was also performed that was found in the modern fashion. As a result, the trend in pixel has these characteristics. Its first nature lies in its plane expression. It was printed as mosaic or graphic grid image or expressed through patchwork technique. Also, rather than a certain form or figure, its unique image was emphasized according to the applied color, size, and position. Second, a stepwise pattern in pixel was applied to external format for part of clothing, eye glass and necktie, indicating some interest and wit. Third, in application to plane and external shape, the graphically modernized effect was realized, not to mention the illusive image with cubic expression. As shown, the characteristics in contemporary fashion via pixel expression were given in fantastic image, optical humor, and reflection of digital value.

• 한국멀티미디어학회논문지
• /
• 제8권10호
• /
• pp.1293-1305
• /
• 2005

본 논문에서는 HMD(head mounted display) 하단에 눈동자의 움직임 영상을 취득할 수 있는 USB 카메라를 부착한 후, 3차원 1인칭 슈팅(first Person shooting) 게임에서 게임 캐릭터의 시선방향을 눈동자 움직임에 의해 조작하는 방법을 제안한다. 본 논문에서 제안하는 방법은 다음과 같이 세 부분으로 구성된다. 첫 번째는 입력 영상으로부터 눈동자의 중심 위치를 실시간 영상 처리 방법으로 추출하는 부분, 두 번째는 HMD 모니터상의 임의 지점을 쳐다볼 때 추출된 눈동자의 위치 정보와 모니터상의 응시 위치 사이의 기하학적인 연관관계를 결정하는 캘리브레이션 부분, 그리고 마지막은 캘리브레이션 정보를 기반으로 모니터 상의 최종적인 응시 위치를 결정하고, 이 정보에 의해 게임상의 3차원 뷰(view) 방향을 조정하는 부분으로 구성된다. 실험 결과, 본 논문의 방법에 의해 손이 불편한 사용자에게 게임을 즐길 수 있는 기회를 제공하고, 게임 캐릭터와 게임 사용자의 시선 방향을 일치시킴으로서 게임의 흥미와 몰입감을 증가시키는 결과를 얻을 수 있었다.

• 한국지능시스템학회논문지
• /
• 제26권6호
• /
• pp.464-470
• /
• 2016

본 논문은 개선된 얼굴검출 알고리즘과 눈의 개폐 빈도수로부터 운전자의 졸음을 판단하는 방법을 제안한다. 이를 위해 기존의 Viola-Jones 알고리즘과 얼굴의 공간적 상관관계를 이용하여 얼굴, 눈, 코, 입을 검출한다. 여기서, 얼굴의 공간적 상관관계는 7가지 특징에 기반한 DFP(Detect Face Part)에 의해 수행된다. Caltect 얼굴 데이터베이스에 실험을 한 결과, 특히 코 영역에 대한 검출률은 기존 Viola-Jones 알고리즘과 비교하여 13.78% 증가된 검출률을 보여주고 있다. 그리고, SVM(Support Vector Machine)과 PERCLOS(Percentage Closure of Eyes)을 사용해 시간에 따른 눈 개폐상태의 누적 값으로 운전자의 졸음 판단을 분석한다. 실험결과 93.28%의 운전자 졸음판단률을 얻어 제안된 방법의 유용성을 확인하였다.

• 한국실내디자인학회논문집
• /
• 제23권1호
• /
• pp.122-131
• /
• 2014

This study aimed to conduct an eye-tracking experiment carried with facade images as a medium and to do research on 'the interest of the eyes' resulted from people's gazing phenomena. This study secured gazing data which appeared according to visual response and analyzed gazing phenomena to find the basic theory of 'the interest of the eyes' as a methodological role, which consumer interest and attention could be grafted when a plan and a design for space design was made. Data terms used in eye-tracking backgrounds and the movement of the eyes were investigated in literature review. Twenty (20) facade images were selected through a case study to get experimental stimuli for the related experiment. Thirty (30) subjects (men and women) suitable for the experiment were recruited to conduct an eye-tracking experiment. After the experiment, five (5) areas were set up in the facade image to identify the focus level of interest and attention. The level of interest and focus was connected to the interest of the eyes. The analysis to study the interest of the eyes was based on nine (9) items such as sequence, entry time, dwell time, hit ratio, revisits, revisitors, average fixation, first fixation and fixation count. Through gaze analysis, the following conclusion was drawn about the 'interest level of sight' for gaze frequency. The interest level can be interpreted to be higher for faster sequence, shorter entry time, longer all fixation(ms) for dwell time, faster all saccade(%), higher hit ratio, more revisits, more revisitors, longer average fixation, faster and longer first fixation, and more fixation count, and the person can be said to have felt interest faster and/or more.

• 디지털콘텐츠학회 논문지
• /
• 제13권2호
• /
• pp.159-167
• /
• 2012

눈동자 추적 기술은 사용자의 의도를 이해하기 위해 눈 움직임을 탐지한다. 이 기술은 최근 점차적으로 발전하였으며 현재에는 여러 경우에 사용될 수 있다. 예를 들어, 장애인이 눈으로 컴퓨터를 사용하게 할 수 있다. 이 논문은 장애인을 위한 눈 추적 시스템 설계 원리, 구체적 적용 사항, 일반적으로 어떻게 적용되고 있는지에 대해 설명한다. 그리고 이를 구현하기 위한 눈동자 자동 추적 알고리즘을 제시한다. 자동 적용 알고리즘은 자동 초점으로 명확한 눈의 이미지를 잡기 위해 렌즈의 움직임을 조정하는 신호 피드백에 기반을 둔다. 이 CCD 카메라 자동 초점 기법은 외부 환경 빛의 강도 변화에 자동 적응하는 기능을 가진다. 이것은 수동 조절의 문제점을 피하고 조절의 정확성에 향상을 가져온다.

• 한국멀티미디어학회논문지
• /
• 제24권1호
• /
• pp.146-154
• /
• 2021

Conspicuous consumption is often investigated in Korea and consumers purchase a product to publicly display economic power or social status. The existing studies argue that brand loyalty and luxury brand preferences escalate conspicuous consumption, and it is important to identify different visual perception to understand irrational consumers' behavior. Car emblem as brands' visual identity represents the brand's image, mission and message. Irrational consumers thus are expected have different visual perception to the emblem or logo. To understand the impact of irrational consumer behavior on visual perception, this study explored how brand loyalty and luxury brand preferences impact on the visual perception of car emblems between Korean domestic brand and imported brand. This study used eye tracking technology to measure the respondents' attention on an emblem of the cars. Eye tracking tools analyze fixations and measure the attention on a specific area of interests (AOI). This study explored the maintaining time and frequency on AOI, as well as explored the size of pupil to identify the respondents' attention on the AOI. In this experiment, the logos of domestic cars (i.e., Hyundai and Kia) and foreign cars (i.e., Mercedes-Benz and BMW) were swapped to see how irrational consumer behavior impact on visual perception of car emblem.

• 한국정보통신학회:학술대회논문집
• /
• 한국정보통신학회 2014년도 추계학술대회
• /
• pp.197-200
• /
• 2014

본 논문은 얼굴의 표정 인식을 이용한 위험상황 인지 알고리즘을 제안한다. 제안방법은 인간의 다양한 감정 표정 중 위험상황을 인지하기 위한 표정인 놀람과 공포의 표정을 인식한다. 제안방법은 먼저 얼굴 영역을 추출하고 검출된 얼굴 영역으로부터 눈 영역과 입술 영역을 추출한다. 각 영역에 Uniform LBP 방법을 적용하여 표정을 판별하고 위험 상황을 인식한다. 제안방법은 Cohn-Kanade 데이터베이스 영상을 대상으로 성능을 평가하였다. 그 결과 표정 인식에 좋은 결과를 보였으며 이를 이용하여 위험상황을 잘 판별하였다.

• 전자통신동향분석
• /
• 제35권4호
• /
• pp.91-102
• /
• 2020

Recently, generative adversarial networks (GANs) is a field of research that has rapidly emerged wherein many studies conducted shows overwhelming results. Initially, this was at the level of imitating the training dataset. However, the GAN is currently useful in many fields, such as transformation of data categories, restoration of erased parts of images, copying facial expressions of humans, and creation of artworks depicting a dead painter's style. Although many outstanding research achievements have been attracting attention recently, GANs have encountered many challenges. First, they require a large memory facility for research. Second, there are still technical limitations in processing high-resolution images over 4K. Third, many GAN learning methods have a problem of instability in the training stage. However, recent research results show images that are difficult to distinguish whether they are real or fake, even with the naked eye, and the resolution of 4K and above is being developed. With the increase in image quality and resolution, many applications in the field of design and image and video editing are now available, including those that draw a photorealistic image as a simple sketch or easily modify unnecessary parts of an image or a video. In this paper, we discuss how GANs started, including the base architecture and latest technologies of GANs used in high-resolution, high-quality image creation, image and video editing, style translation, content transfer, and technology.