• 제목/요약/키워드: gesture tracking

검색결과 110건 처리시간 0.021초

사람의 움직임 추적을 위한 다중 카메라 기반의 지면 위 발의 대응 (Multiple Camera-Based Correspondence of Ground Foot for Human Motion Tracking)

  • 서동욱;채현욱;조강현
    • 제어로봇시스템학회논문지
    • /
    • 제14권8호
    • /
    • pp.848-855
    • /
    • 2008
  • In this paper, we describe correspondence among multiple images taken by multiple cameras. The correspondence among multiple views is an interesting problem which often appears in the application like visual surveillance or gesture recognition system. We use the principal axis and the ground plane homography to estimate foot of human. The principal axis belongs to the subtracted silhouette-based region of human using subtraction of the predetermined multiple background models with current image which includes moving person. For the calculation of the ground plane homography, we use landmarks on the ground plane in 3D space. Thus the ground plane homography means the relation of two common points in different views. In the normal human being, the foot of human has an exactly same position in the 3D space and we represent it to the intersection in this paper. The intersection occurs when the principal axis in an image crosses to the transformed ground plane from other image. However the positions of the intersection are different depend on camera views. Therefore we construct the correspondence that means the relationship between the intersection in current image and the transformed intersection from other image by homography. Those correspondences should confirm within a short distance measuring in the top viewed plane. Thus, we track a person by these corresponding points on the ground plane. Experimental result shows the accuracy of the proposed algorithm has almost 90% of detecting person for tracking based on correspondence of intersections.

교사 참여형 교육프로그램(TPEP)을 경험한 초등교사의 과학 수업 전문성 변화 사례 - 시각적 주의를 중심으로 - (The Case Study of Elementary School Teachers Who Have Experienced Teacher Participation-oriented Education Program (TPEP) for Elementary School Teachers to Improve Class Expertise in Science Classes - Focusing on Visual Attention -)

  • 김장환;신원섭;신동훈
    • 한국초등과학교육학회지:초등과학교육
    • /
    • 제39권1호
    • /
    • pp.133-144
    • /
    • 2020
  • The purpose of this study is to identify the effect of Teacher Participation-oriented Education Program (TPEP) for Elementary School Teachers to Improve Class Expertise in Science Classes with a focus on visual attention. The participants were two elementary school teachers in Seoul and taught science subjects. The lesson topic applied to this study were 'Structure and Function of Our Body' in the second semester of fifth grade and 'Volcano and Earthquake' in the second semester of fourth grade. The mobile eye tracker SMI's ETG 2w, which is a binocular tracking system was used in this study. In this study, the actual practice time, participant's visual attention, visual intake time average, and visual intake time average were analyzed by class phase. The results of the study are as follows. First, as a result of analyzing the actual class execution time, the actual class execution time was almost in line with the lesson plan after the TPEP application. Second, visual attention in the areas related to teaching and learning activities was high after applying TPEP. Factors affecting the progress of the class and cognitive burdens were identified quantitatively and objectively through visual attention. Third, as a result of analyzing the visual intake time average of participants, there was a statistically significant difference in all classes. Fourth, as a result of analyzing the visual intake time average of participants, the results were statistically significant in the introduction(video), activity 1, activity 2, and activity 3 stages in the lecture type class. The Teacher Participation-oriented Education Program (TPEP) for Elementary School Teachers to Improve Class Expertise in Science Classes can extend elementary science class expertise such as self-class analysis, eye tracking, linguistic, gesture, and class design beyond traditional class analysis and consulting.

키넥트를 이용한 손 영역 검출의 정확도 개선 (Detection Accuracy Improvement of Hang Region using Kinect)

  • 김희애;이창우
    • 한국정보통신학회논문지
    • /
    • 제18권11호
    • /
    • pp.2727-2732
    • /
    • 2014
  • 최근 마이크로소프트사의 키넥트(Kinect)를 이용하여 객체를 추적하거나 인식하는 기술에 관한 연구가 활발히 진행되고 있다. 이와 같은 환경에서 손을 검출하고 추적하는 기술은 휴먼-인터페이스 개발의 가장 기본적인 기술이다. 본 논문에서는 키넥트를 이용하여 단색으로 제한되지 않은 환경에서 검출된 손의 경계를 개선하는 방법을 제안한다. 제안된 방법은 키넥트 센서의 깊이영상(Depth Image)에서 추출된 손의 영역과 칼라영상에서 피부색(Skin Color)의 검출 결과를 결합하여 손 영역의 정확도를 개선한다. 제안된 방법으로 손 영역의 검출을 수행한 결과 깊이영상만 사용한 방법 보다 손 영역을 검출하는 정확도를 높일 수 있음을 보였다. 제안된 방법이 수화나 제스처 인식 시스템에 적용된다면 정확도 개선에 많은 기여를 하리라 기대한다.

객체 감지 데이터 셋 기반 인체 자세 인식시스템 연구 (Research on Human Posture Recognition System Based on The Object Detection Dataset)

  • 유암;리라이춘;루징쉬엔;쉬멍;정양권
    • 한국전자통신학회논문지
    • /
    • 제17권1호
    • /
    • pp.111-118
    • /
    • 2022
  • 컴퓨터 비전 연구에서 2차원 인체 자세는 매우 광범위한 연구 방향으로 특히 자세 추적과 행동 인식에서 유의미한 분야다. 인체 자세 표적 획득은 이미지에서 인체 목표를 정확히 찾는 방법을 연구하는 것이 핵심이며 인체 자세 인식은 인공지능(AI)에 적용하는 한편 일상생활에 활용되고 있어서 매우 중요한 연구의의가 있다. 인체 자세 인식 효과의 우수성의 기준은 인식 과정의 성공률과 정확도에 의해 결정된다. 본 연구의 인체 자세 인식에서는 딥러닝 전용 데이터셋인 MS COCO를 기반하여 인체를 17개의 키 포인트로 구분하였다. 다음으로 주요 특징에 대한 세분화 마스크(segmentation mask) 방법을 사용하여 인식률을 개선하였다. 최종적으로 신경망 모델을 설계하고 간단한 단계별 학습부터 효율적인 학습에 이르기까지 많은 수의 표본을 학습시키는 알고리즘을 제안하여 정확도를 향상할 수 있었다.

AR 디스플레이 연결을 통한 감각시각화에 대한 표현 검토 (Study on the Expression of Sensory Visualization through AR Display Connection - Focusing on Eye Tracking)

  • 마소위
    • 문화기술의 융합
    • /
    • 제10권2호
    • /
    • pp.357-363
    • /
    • 2024
  • AR 디스플레이 가상기술이 대중 학습 생활에 광범위하게 들어오면서 현실과 가상이 연결을 하는 디자인 전달 방식도 변화하고 있다. 본 논문은 평면의 시각적방향 감각 정보 시각화 경험을 통하여 3D 연결 감각 정보 시각화 경험과 가상 현실적 증강 사이의 표현을 연구하는 데 목적이 있다. AR 디스플레이 대한 고찰과 평면 시각화 사례의 현재 적용과 비교하여 기본 설정하는 방법을 조사하여 분석된다. AR 디스플레이 연결 디자인에서 제스처 연결, 안구추적, 음성 연결 및 센서의 4가지 범주에서 안구 추적 기술을 중심으로 감각 시각화와의 관계를 통해 사용자가 더 나은 경험을 할 수 있도록 하는 것이 이 논문의 범위이다. AR 디스플레이 상호작용에 대한 고찰과 평면 시각화 사례의 현재 적용 및 비교 분석 과정을 통해 AR 디스플레이 상호작용을 통한 안구 추적 기술을 중심으로 감각 시각화의 요소 시각 도형의 기하학적 일관성, 빛과 색상의 일관성, 다감각 상호작용 방식의 조합, 합리적인 내용의 표시, 스마트 푸시는 가상현실에서의 감각 시각화를 보다 사실적이고 편리하게 표현하여 수용자에게 간단하고 편리한 감각 시각화 경험을 제공하였다.

역운동학을 이용한 실시간 동작 복원 시스템 구현 (An Implementation of Real-time Motion Restoration System based on Inverse Kinematics)

  • 이란희;이칠우
    • 한국멀티미디어학회논문지
    • /
    • 제17권6호
    • /
    • pp.741-750
    • /
    • 2014
  • This paper presents a real-time motion restoration system for people who need remedial exercise of musculoskeletal based on Inverse Kinematics. A new approach is suggested to recognize a gesture based on restored human motion which is calculated the 3D positions of intermediate joints using 3D positions of body features estimated from images. For generating the 3D candidate positions of intermediate joints which cannot be extracted from images, we apply an Inverse Kinematics theory to compute the target position of intermediate joints. And we can reduce the number of candidate positions by applying the various physical constraints of body. Finally, we can generate the more accurate final position using the Kalman filter for a motion tracking and the relationship between the previous frame information and the candidate positions. The system provide motion information which are rotation angle and height in real-time, therefore the rehabilitation exercises can be performed based on the information and figured out proper exercise for individual status.

원격 장치 제어를 위한 임베디드 기술 기반의 개인용 커뮤니케이터 설계 및 구현 (Design and Implementation of Personal Communicator based on Embedded Single Board Computer for Controlling of Remote Devices)

  • 장성식;변태영
    • 한국산업정보학회논문지
    • /
    • 제16권2호
    • /
    • pp.99-109
    • /
    • 2011
  • 본 논문에서는 손동작 인식을 통하여 원격지의 로봇이나 기타 구동장치를 제어할 수 있는 개인용 커뮤니케이터(personal communicator)와 가정 내 정보가전기기를 제어할 수 있는 홈게이트웨이 및 이동형 홈서버의 설계 및 구현 대용을 기술한다. 임베디드 보드 기반의 개인용 커뮤니케이터는 사용자의 손동작을 인식하고 그 동작을 추적하여 원격지의 이동형 홈서버의 동작을 제어하기 위한 적절한 명령으로 변환한다. 본 구현에서는 LN2440 임베디드 전용보드 상에 손동작 인식 및 추적, 원격 이동형 홈서버 제어 명령 변환, 무선 접속기능을 이용한 홈게이트웨이 제어, 사용자 인터페이스의 설계 및 구현, 단위 및 통합 테스트의 내용을 기술한다. 본 구현은 원격탐사로봇 제어, 장애인 구동장치 제어 등 원격지의 구동 장치를 제어할 수 있는 다양한 분야에 활용될 수 있는 장점이 있다.

멀티 카드 터치기반 인터랙티브 아케이드 게임 시스템 구현 (Development of Multi Card Touch based Interactive Arcade Game System)

  • 이동훈;조재익;윤태수
    • 한국엔터테인먼트산업학회논문지
    • /
    • 제5권2호
    • /
    • pp.87-95
    • /
    • 2011
  • 최근 다양한 인터랙티브 인터페이스 개발로 인해 체감형 게임 환경에 관심이 모아지고 있다. 따라서 본 논문에서는 증강현실 기술의 하나인 마커인식 인터페이스와 멀티 터치 인터랙션 인터페이스를 이용한 멀티 카드 터치 기반의 인터랙티브 아케이드 시스템을 제안한다. 이를 위해 DI 기반의 인식 알고리즘을 적용하여 카드의 위치, 방향 정보를 인식한다. 또한 사용자의 손 제스처 정보를 트래킹하여 다양한 인터랙션 메타포를 제공한다. 본 시스템은 사용자에게 좀 더 높은 몰입감을 제공하며 새로운 경험을 제공한다. 따라서 제안하는 시스템은 체감형 아케이드 게임기기에 활용될 것이다.

밀리미터파의 손동작 인식 알고리즘에 관한 연구 (Study on Hand Gestures Recognition Algorithm of Millimeter Wave)

  • 남명우;홍순관
    • 한국산학기술학회논문지
    • /
    • 제21권7호
    • /
    • pp.685-691
    • /
    • 2020
  • 본 논문에서는 77GHz를 사용하는 밀리미터파 레이더 센서의 반향 신호를 이용하여 손동작의 움직임을 추적한 후 얻어진 데이터로 0부터 9까지의 숫자들을 인식하는 알고리즘을 개발하였다. 손동작을 감지하여 레이더 센서로부터 얻어진 반향 신호들은 산란 단면적의 차이 등에 의해 불규칙한 점들의 군집형태를 보인다. 이들로부터 유효한 중심점을 얻기 위해 3차원 좌푯값들을 이용해 K-Means 알고리즘을 적용하였다. 그리고 얻어진 중심점들을 연결하여 숫자 형태의 이미지를 생성하였다. 얻어진 이미지와 스무딩 기법을 적용해 사람의 손글씨 형태와 유사하게 만든 이미지를 MNIST(Modified National Institute of Standards and Technology database)로 훈련된 CNN(Convolutional Neural Network) 모델에 입력하여 인식률을 비교하였다. 실험은 두 가지 방법으로 진행되었다. 먼저 스무딩 기법을 적용한 이미지와 적용하지 않은 이미지를 사용한 인식 실험에서는 각각 평균 77.0%와 81.0%의 인식률을 얻었다. 그리고 학습데이터를 확장(augmentation)한 CNN 모델의 실험에서는 스무딩 기법을 적용한 이미지와 적용하지 않은 이미지를 사용한 인식 실험에서 각각 평균 97.5%와 평균 99.0%의 인식률을 얻었다. 본 연구는 레이더 센서를 이용한 다양한 비접촉 인식기술에 응용이 가능할 것으로 판단된다.

디지털 미디어 콘텐츠 개발을 위한 교육용 플랫폼의 활용성 (An Educational Platform for Digital Media Prototype Development: an analysis and a usability study)

  • 김나영
    • 한국콘텐츠학회논문지
    • /
    • 제11권8호
    • /
    • pp.77-87
    • /
    • 2011
  • 기술의 발전과 함께 매해 쏟아져 나오는 새로운 플랫폼들은 콘텐츠 생산자들에게 창의적이고 혁신적인 콘텐츠를 개발할 수 있는 새로운 기회를 제공하고 있다. 이러한 현상은 디지털 미디어 콘텐츠 분야를 전공하는 학생들에게도 중요한 영향을 미쳐 콘텐츠 개발 시 새로운 기술 기반의 플랫폼을 활용해 봄으로써 그들에게 보다 새롭고 유익한 배움의 기회를 제공한다. 본 논문에서는 최근 디지털 미디어분야 학생들에게 주목받고 있는 주요기술로서 가상현실 디스플레이, 동작인식부, 물리엔진 그리고 체감형 인터페이스 기술을 제시하고, 이 4가지 기술을 사용하는 통합 플랫폼을 개발하여 콘텐츠 개발 시 보다 쉽고 편리하게 구현할 수 있도록 설계하였다. 또한 디지털 콘텐츠 개발 교육을 위한 목적으로서 플랫폼의 실용성을 검토하고자 제안한 플랫폼을 기반으로 4개의 프로토타입 콘텐츠를 개발하고 플랫폼의 활용성을 평가하였다. 사용자 평가결과 시스템의 기능성, 사용성, 유용성, 만족도 및 선호도 모두 전반적으로 높게 나타났으며 이 같은 플랫폼의 활용도는 학생들에게 쉽고 빠르게 프로토타입 콘텐츠(Rapid prototype)를 제작 할 수 있는 환경을 조성해 주어 창의적인 미디어 콘텐츠 연구에 있어 긍정적인 영향을 줄 것으로 사료된다.