Implementation to eye motion tracking system using OpenCV and convolutional neural network

OpenCV 와 Convolutional neural network를 이용한 눈동자 모션인식 시스템 구현

  • Lee, Seung Jun (Dept. of Electrical, Electronic, Control Eng. and IITC, Hankyong National University) ;
  • Heo, Seung Won (Dept. of Electrical, Electronic, Control Eng. and IITC, Hankyong National University) ;
  • Lee, Hee Bin (Dept. of Electrical, Electronic, Control Eng. and IITC, Hankyong National University) ;
  • Yu, Yun Seop (Dept. of Electrical, Electronic, Control Eng. and IITC, Hankyong National University)
  • 이승준 (한경대학교 전기전자제어공학과, IITC) ;
  • 허승원 (한경대학교 전기전자제어공학과, IITC) ;
  • 이희빈 (한경대학교 전기전자제어공학과, IITC) ;
  • 유윤섭 (한경대학교 전기전자제어공학과, IITC)
  • Published : 2018.10.18

Abstract

Previoisly presented "Implementation to pupil motion recognition system using convolution neural network".is improved. Using OpenCV, face and eye areas are detected, and then configure the neural network using Numpy. This pupil motion recognition system is based on the Numpy for configuring and calculating the neural network. This system is implemented on DE1-SOC.

본 논문에서는 이전에 발표한 "Convolutional neural network를 이용한 눈동자 모션인식 시스템 구현"을 OpenCV의 눈 영역 검출을 이용해 보완하고 신경망 구성 및 연산에 Numpy를 이용한 눈동자 모션인식 시스템에 대해 소개한다. Numpy를 이용해 신경망을 구성하고 OpenCV를 이용해 얼굴영역과 눈영역을 검출해 내고 눈영역 이미지를 이용해 신경망을 학습하고 학습된 신경망으로 눈동자의 움직임을 인식한다. 이 시스템은 SOC 보드인 DE1-SOC 보드 위에 구현했다.

Keywords