• 제목/요약/키워드: Appearance-based Action Features

검색결과 7건 처리시간 0.02초

자세 예측을 이용한 효과적인 자세 기반 감정 동작 인식 (Effective Pose-based Approach with Pose Estimation for Emotional Action Recognition)

  • 김진옥
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제2권3호
    • /
    • pp.209-218
    • /
    • 2013
  • 인간의 동작 인식에 대한 이전 연구는 주로 관절체로 표현된 신체 움직임을 추적하고 분류하는데 초점을 맞춰 왔다. 이 방식들은 실제 이미지 사용 환경에서 신체 부위에 대한 정확한 분류가 필요하다는 점이 까다롭기 때문에 최근의 동작 인식 연구 동향은 시공간상의 관심 점과 같이 저수준의, 더 추상적인 외형특징을 이용하는 방식이 일반화되었다. 하지만 몇 년 사이 자세 예측 기술이 발전하면서 자세 기반 방식에 대한 시각을 재정립하는 것이 필요하다. 본 연구는 외형 기반 방식에서 저수준의 외형특징만으로 분류기를 학습시키는 것이 충분한지에 대한 문제를 제기하면서 자세 예측을 이용한 효과적인 자세기반 동작인식 방식을 제안하였다. 이를 위해 다양한 감정을 표현하는 동작 시나리오를 대상으로 외형 기반, 자세 기반 특징 및 두 가지 특징을 조합한 방식을 비교하였다. 실험 결과, 자세 예측을 이용한 자세 기반 방식이 저수준의 외형특징을 이용한 방식보다 감정 동작 분류 및 인식 성능이 더 나았으며 잡음 때문에 심하게 망가진 이미지의 감정 동작 인식에도 자세 예측을 이용한 자세기반의 방식이 효과적이었다.

Improved DT Algorithm Based Human Action Features Detection

  • Hu, Zeyuan;Lee, Suk-Hwan;Lee, Eung-Joo
    • 한국멀티미디어학회논문지
    • /
    • 제21권4호
    • /
    • pp.478-484
    • /
    • 2018
  • The choice of the motion features influences the result of the human action recognition method directly. Many factors often influence the single feature differently, such as appearance of the human body, environment and video camera. So the accuracy of action recognition is restricted. On the bases of studying the representation and recognition of human actions, and giving fully consideration to the advantages and disadvantages of different features, the Dense Trajectories(DT) algorithm is a very classic algorithm in the field of behavior recognition feature extraction, but there are some defects in the use of optical flow images. In this paper, we will use the improved Dense Trajectories(iDT) algorithm to optimize and extract the optical flow features in the movement of human action, then we will combined with Support Vector Machine methods to identify human behavior, and use the image in the KTH database for training and testing.

정서재활 바이오피드백을 위한 얼굴 영상 기반 정서인식 연구 (Study of Emotion Recognition based on Facial Image for Emotional Rehabilitation Biofeedback)

  • 고광은;심귀보
    • 제어로봇시스템학회논문지
    • /
    • 제16권10호
    • /
    • pp.957-962
    • /
    • 2010
  • If we want to recognize the human's emotion via the facial image, first of all, we need to extract the emotional features from the facial image by using a feature extraction algorithm. And we need to classify the emotional status by using pattern classification method. The AAM (Active Appearance Model) is a well-known method that can represent a non-rigid object, such as face, facial expression. The Bayesian Network is a probability based classifier that can represent the probabilistic relationships between a set of facial features. In this paper, our approach to facial feature extraction lies in the proposed feature extraction method based on combining AAM with FACS (Facial Action Coding System) for automatically modeling and extracting the facial emotional features. To recognize the facial emotion, we use the DBNs (Dynamic Bayesian Networks) for modeling and understanding the temporal phases of facial expressions in image sequences. The result of emotion recognition can be used to rehabilitate based on biofeedback for emotional disabled.

동작 인식을 위한 교사-학생 구조 기반 CNN (Teacher-Student Architecture Based CNN for Action Recognition)

  • ;이효종
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제11권3호
    • /
    • pp.99-104
    • /
    • 2022
  • 대부분 첨단 동작 인식 컨볼루션 네트워크는 RGB 스트림과 광학 흐름 스트림, 양 스트림 아키텍처를 기반으로 하고 있다. RGB 프레임 스트림은 모양 특성을 나타내고 광학 흐름 스트림은 동작 특성을 해석한다. 그러나 광학 흐름은 계산 비용이 매우 높기 때문에 동작 인식 시간에 지연을 초래한다. 이에 양 스트림 네트워크와 교사-학생 아키텍처에서 영감을 받아 행동 인식을 위한 새로운 네트워크 디자인을 개발하였다. 제안 신경망은 두 개의 하위 네트워크로 구성되어있다. 즉, 교사 역할을 하는 광학 흐름 하위 네트워크와 학생 역할을 하는 RGB 프레임 하위 네트워크를 연결하였다. 훈련 단계에서 광학 흐름의 특징을 추출하고 교사 서브 네트워크를 훈련시킨 다음 그 특징을 학생 서브 네트워크를 훈련시키기 위한 기준선으로 지정하여 학생 서브 네트워크에 전송한다. 테스트 단계에서는 광학 흐름을 계산하지 않고 대기 시간이 줄어들도록 학생 네트워크만 사용한다. 제안 네트워크는 실험을 통하여 정확도 면에서 일반 이중 스트림 아키텍처에 비해 높은 정확도를 보여주는 것을 확인하였다.

실제 실내 환경에서 이동로봇의 위상학적 위치 추정 (Topological Localization of Mobile Robots in Real Indoor Environment)

  • 박영빈;서일홍;최병욱
    • 로봇학회논문지
    • /
    • 제4권1호
    • /
    • pp.25-33
    • /
    • 2009
  • One of the main problems of topological localization in a real indoor environment is variations in the environment caused by dynamic objects and changes in illumination. Another problem arises from the sense of topological localization itself. Thus, a robot must be able to recognize observations at slightly different positions and angles within a certain topological location as identical in terms of topological localization. In this paper, a possible solution to these problems is addressed in the domain of global topological localization for mobile robots, in which environments are represented by their visual appearance. Our approach is formulated on the basis of a probabilistic model called the Bayes filter. Here, marginalization of dynamics in the environment, marginalization of viewpoint changes in a topological location, and fusion of multiple visual features are employed to measure observations reliably, and action-based view transition model and action-associated topological map are used to predict the next state. We performed experiments to demonstrate the validity of our proposed approach among several standard approaches in the field of topological localization. The results clearly demonstrated the value of our approach.

  • PDF

단편애니메이션의 실험적 영상연출 연구 -<탱고>와 <페스트 필름>을 중심으로 (A Study of Experimental Image Direction for Short Animation Movies -focusing in short film and )

  • 최돈일
    • 만화애니메이션 연구
    • /
    • 통권36호
    • /
    • pp.375-391
    • /
    • 2014
  • 애니메이션은 이야기를 바탕으로 프레임을 구성하는 조형언어와 컷을 구성하는 프레임을 그려내는 비실사동영상예술이다. 따라서 영상을 표현함에 있어 프레임 내에서는 미술의 표현어법과 조형공간장치들을, 컷은 프레임과 프레임사이의 영상 어법을 충실하게 갖추어야한다. 단편애니메이션은 작가의 주관적 담론을 표현하기 위한 서사보다는 독특한 이미지표현과 다양한 영상 실험에 의해 제작되는 특징을 갖고 있다. 따라서 독창적인 영상을 구성하는 이미지스타일이나 다양한 영상연출 등이 매우 중요한 요소로 작용한다. 이번연구에서는 필름조작에 의한 제작방식을 보여준 <탱고>와 <페스트 필름>의 실험적 영상 연출의 특징을 상호 비교해보았다. 그 결과 다음과 같은 특징을 알 수 있었다. 첫째, 제작기법에서는 <탱고>는 라이브 영상에서 얻어낸 이미지를 셀매트에 직접 페인팅과 많은 옵티컬 노출공정을 통해 제작한 픽실레이션인 반면 <페스트 필름>은 수백편의 액션영화의 장면을 선별하여 찢기, 오리기, 붙이기, 접기 등의 다양한 콜라주기법으로 제작되었다. 둘째, 화면공간연출로는 <탱고>는 일반적인 화면전환을 거부하고 고정된 카메라앵글로 인물들의 비 인과관계를 반복된 행위와 순환적 영상구조로 표현한 반면 <페스트 필름>은 인물간의 상호 대립관계를 다양한 카메라앵글과 독특한 이미지의 화면전환으로 빠르게 진행하는 전진구조를 갖고 있었다. 셋째, 편집에서는 <탱고>는 다양한 인물의 등장으로 여러 개의 장면으로 보이나 실질적으로는 전체의 영상이 하나의 쇼트로 이루어진 롱 테이크 쇼트로 표현되었다. 반면 <페스트 필름>은 수백 개의 다양한 쇼트에 의한 영상재구성으로 시각적 재미와 몰입 도를 극대화하고 있다. 즉 두 작품 모두 일반적인 애니메이션제작방식과는 차별화된 필름조작을 통해 애니메이션영상표현의 확장성을 보여준 실험적 작품이라는 공통점을 갖고 있다. 이외에도 <탱고>가 뚜렷한 내러티브 없이 다양한 인간들의 반복일상을 재 개념화된 공간의 영상미로 전달한 반면 <페스트 필름>은 이항대립의 구조로 설정하고 속도감 있는 전개와 콜라주에 의한 이미지 재구성을 통해 새로운 영상공간으로 풀어내고 있음을 알 수 있었다.

조귀명이 제시한 정관(靜觀)의 관찰 방법과 골계(滑稽)의 수사(修辭) (A Study on Jo Guimyeong's observation method and rhetoric of style of writing)

  • 김광섭
    • 동양고전연구
    • /
    • 제72호
    • /
    • pp.35-66
    • /
    • 2018
  • 본고는 조귀명의 정관(靜觀)의 관찰방법과 골계의 문장 수사법을 살펴보았다. 그는 정관(靜觀)의 관찰방법을 통해 세상을 다르게 보려 했고, 골계(滑稽)의 문체 수법을 통해 세상과의 관계를 표현하였다. 정관(靜觀)은 주체와 대상을 새롭게 보는 방법이다. 주체의 감각과 사고를 신뢰하고 자신의 독자적 관점에서 천하의 사정과 이치를 분명하게 밝히는 것이었다. 이 경우 당대의 보편적 사고와 충돌하는 지점이 생긴다. 그는 보편적 사고와 독자적 관점의 충돌을 골계(滑稽)의 형식으로도 표현했다. 그는 사유와 행동 기준을 '기미(氣味)'와 '적의(適意)'에 두었다. 이는 세 가지 의미를 지닌다. 첫째 자신의 사유와 행동이 성인의 것과 다르지 않다는 자부심이다. 둘째, 자신은 타인과 구별되는 감성과 사고를 가진 독립적 존재라는 것이다. 셋째, 이에 근거하여 자신의 문학 작품은 독자적 가치를 지닌다는 것이다. 이러한 사유와 행동은 정관(靜觀)의 관찰 방법을 통해 구체화 되었다. 그가 정관(靜觀)의 3단계 과정을 통해 얻은 것은 '호연(浩然)한 마음'이다. 첫 번째 단계는 자기 성찰이다. 그 목적은 '호연(浩然)한 마음'으로 '물래순응(物來順應)'의 경지에 도달하는 것이다. 관찰 기준은 승제(乘除)의 이치이다. 두 번째 대상은 '물지정상(物之情狀)'이다. 그 관찰 대상은 쇠똥구리가 똥덩어리를 굴리는 모습까지 넓어진다. 세 번째 관찰대상은 조화자이다. 조화자의 움직임에 동참하는 것이다. 따라서 자신의 사유와 행동, 문학 작품은 조화자의 움직임과 대등한 의미를 지닌다고 본다. 그는 서술 방법이 자득한 내용에 따라 변화할 수 있다고 하였다. 문장 표현을 조탁하든, 질박하게 하든, 검담하게 하든, 농염하고 화려하게 하든 상황에 맞게 하면 된다는 것이다. 대표적 예로 <성보형화상찬(成甫兄畵像贊)>을 분석하였다. 그는 박문수에 대한 당대의 일반적 평가와 달리 '병든 학'과 '새장 속에 갇힌 학'으로 비유를 하였다. 사적 공간에서 골계를 좋아하는 박문수의 습관과 초상화의 외형적 특징을 연계하여 그의 공적 이미지를 파괴한 것이다. 이를 통해 박문수가 자연 속에 사는 학의 본성을 가지고 있지만, 관료 생활에서 벗어나지 못하는 처세를 웃음을 유도하며 폭로 혹은 비판하고 있다. 이러한 골계의 수사법은 조귀명 산문이 가지는 대표적 특징 중 하나이다. 추후 논문에서 <왜려설(倭驢說)>, <장공예백인설(張公藝百忍說)>, <기몽(記夢)>, <홍앵무부(紅鶯鵡賦)> 등을 골계의 측면에서 구체적으로 살펴보고자 한다.