• 제목/요약/키워드: Emotion recognition system

검색결과 220건 처리시간 0.027초

감정과 행동인식을 활용한 스마트홈 자동화 시스템 (Smart Home Automation System Using Emotion and Behavior Recognition)

  • 이승희;이승빈;류상욱;이혜원
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2021년도 추계학술발표대회
    • /
    • pp.1051-1054
    • /
    • 2021
  • 본 시스템은 홈 CCTV 를 이용해 집 안 사용자의 감정인식, 행동인식을 통해 스마트홈 자동화할 수 있는 시스템으로, 인식된 감정에 맞춰 음악 재생, 조명 조절을 하거나 간단한 동작만으로 IoT 단말을 컨트롤 한다. 또한 실시간으로 IoT 장비들이 동작할 수 있도록 마이크로 서비스 아키텍처로 감정인식과 행동인식 서비스를 설계하여 구현하는 것이 특징이다. 이는 스마트홈 내에서 더 편리하고 가치 있는 집안 환경을 구현할 수 시스템을 제공한다.

머신 러닝과 Microservice 기반 디지털 미러 시스템 (Digital Mirror System with Machine Learning and Microservices)

  • 송명호;김수동
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제9권9호
    • /
    • pp.267-280
    • /
    • 2020
  • 거울은 일반적으로 아말감으로 코팅된 물리적 반사 표면으로 거울 앞의 상을 선명하게 반사한다. 이것은 언제 어디서나 사용이 가능하며 사용자의 얼굴이나 외모를 확인하기 위한 필수적인 도구이다. 현대 소프트웨어 기술의 출현으로 사람들은 실시간 처리, Microservice 및 머신 러닝이 적용된 편의성과 지능성을 통해 거울 반사 기능을 향상시킬 수 있다. 본 논문에서는 거울로써 실시간 반영과 동시에 사용자 맞춤 정보 조회, 공공 정보 조회, 외모를 통한 나이와 감정 탐지 등의 기능을 가진 디지털 거울 시스템 개발을 제안한다. 더불어, 본 시스템은 터치 기반, 음성 인식 기반, 제스처 기반의 Multi-Modal 사용자 인터페이스를 제공한다. 본 논문에서는 이 시스템에 대한 디자인을 제시하고 현재 기술을 이용하여 실시간 거울 반영과 동시에 유용한 정보 제공 및 지능형 머신 러닝 기술을 제공하는 구현 방법을 제안한다.

HEEAS: 감정표현 애니메이션 알고리즘과 구현에 관한 연구 (HEEAS: On the Implementation and an Animation Algorithm of an Emotional Expression)

  • 김상길;민용식
    • 한국콘텐츠학회논문지
    • /
    • 제6권3호
    • /
    • pp.125-134
    • /
    • 2006
  • 본 논문은 음성이 인간에게 전달되어 나타나는 여러 가지 감정 표현 중에서 단지 4가지 감정 즉 두려움, 싫증, 놀람 그리고 중성에 대한 감정 표현이 얼굴과 몸동작에 동시에 나타내는 애니메이션 시스템인 HEEAS(Human Emotional Expression Animation System)를 구현하는데 그 주된 목적이 있다. 이를 위해서 본 논문에서는 감정 표현이 풍부한 한국인 20대 청년을 모델로 설정하였다. 또한 입력되어진 음성 신호를 통해서 추출된 감정표현에 대한 데이터를 얼굴코드와 몸동작코드를 부여하고 이를 데이터 베이스화 하여 실제 애니메이션 구현을 하기 위한 처리의 시간을 최소화하였다. 즉, 입력되어진 음성 신호를 이용해서 원하는 결과인 얼굴, 몸동작에 대한 자료를 이진 검색을 이용해서 데이터베이스에서 찾으므로 검색 시간을 최소화하였다. 실제 감정 표현에 대한문제들을 실험을 통해서 얻은 결과가 99.9%의 정확도임을 알 수가 있었다.

  • PDF

감성 상호작용을 갖는 교육용 휴머노이드 로봇 D2 개발 (Design and implement of the Educational Humanoid Robot D2 for Emotional Interaction System)

  • 김도우;정기철;박원성
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2007년도 제38회 하계학술대회
    • /
    • pp.1777-1778
    • /
    • 2007
  • In this paper, We design and implement a humanoid robot, With Educational purpose, which can collaborate and communicate with human. We present an affective human-robot communication system for a humanoid robot, D2, which we designed to communicate with a human through dialogue. D2 communicates with humans by understanding and expressing emotion using facial expressions, voice, gestures and posture. Interaction between a human and a robot is made possible through our affective communication framework. The framework enables a robot to catch the emotional status of the user and to respond appropriately. As a result, the robot can engage in a natural dialogue with a human. According to the aim to be interacted with a human for voice, gestures and posture, the developed Educational humanoid robot consists of upper body, two arms, wheeled mobile platform and control hardware including vision and speech capability and various control boards such as motion control boards, signal processing board proceeding several types of sensors. Using the Educational humanoid robot D2, we have presented the successful demonstrations which consist of manipulation task with two arms, tracking objects using the vision system, and communication with human by the emotional interface, the synthesized speeches, and the recognition of speech commands.

  • PDF

자폐아를 위한 표정 훈련 디지털 치료제 (Facial Expression Training Digital Therapeutics for Autistic Children)

  • 박지연;이경원;엄성용
    • 문화기술의 융합
    • /
    • 제9권1호
    • /
    • pp.581-586
    • /
    • 2023
  • 최근 자폐 스펙트럼 장애가 있는 변호사를 주인공으로 하는 TV 드라마가 많은 화제를 불러일으키면서 그 영향으로 자폐 스펙트럼 장애인이 겪는 어려움에 관한 관심도 높아졌다. 자폐 스펙트럼은 조기에 발견해 교육과 치료를 제대로 받으면 예후를 좋게 할 수 있어 그 치료제 개발이 절실히 요구되고 있다. 현재 자폐 스펙트럼 치료에 사용되는 약물은 부작용이 있는 경우가 많아, 그에 비해 부작용이 없고 대량 공급이 가능한 디지털 치료제가 주목받고 있다. 본 논문에서는 자폐 스펙트럼을 가진 영유아를 위한 감정 및 표정 학습을 제공하는 애플리케이션이자 디지털 치료제인 '아이모션(AEmotion)'을 소개한다. 본 시스템은 훈련에 대한 흥미를 높이고 손쉬운 적용 테스트를 위해, 스마트폰용 애플리케이션으로 개발되었다. 머신 러닝 기법을 활용하는 본 시스템은 표정 카드를 통해 감정을 학습하는 '감정 학습' 단계, 감정과 표정을 잘 이해했는지 확인하는 '감정 식별' 단계, 그리고 감정과 알맞은 표정을 짓는 '표정 훈련' 단계 등 총 3단계로 이루어져 있다. 이 시스템을 통해, 표정 인식과 감정처리가 익숙하지 않아 사회적 상호작용이 어려운 자폐 스펙트럼 장애 아동들의 표정 훈련 및 치료에 효과가 있을 것으로 기대한다.

자폐스펙트럼장애 진단 및 치료를 위한 감성 컴퓨팅 기술 동향 분석 (Trend Analysis of Affective Computing Technology for Diagnosis and Therapy of Autistic Spectrum Disorder)

  • 윤현중;정성엽
    • 감성과학
    • /
    • 제13권3호
    • /
    • pp.429-440
    • /
    • 2010
  • 자폐스펙트럼장애는 91명당 1명이 문제를 보인다고 보고되었으며 이는 우리나라 암 발생률보다도 높은 수준이지만, 국내에서는 제대로 된 진단 및 치료가 이루어지고 있지 않아 사회적으로 심각한 복지 사각지대에 있다. 자폐스펙트럼장애 아동의 경우 자신의 정서 상태를 제대로 표현하지 못하여 기존의 치료 및 교육 방법에 제약이 많기 때문에, 장애 아동의 정서를 실시간으로 인지하여 활용할 수 있는 새로운 개념의 치료 시스템의 개발이 요구된다. 본 논문에서는 생체신호 감지를 통한 정서 상태 인지 기술 및 가상 감성 에이전트(agent) 모델링 기술을 포함한 감성 컴퓨팅 기술에 대하여 기술 동향 분석 결과를 제시하고, 새로운 자폐스펙 트럼장애 진단 및 치료를 위한 시스템 구성방식을 제안한다. 제안된 시스템은 뇌파 등의 생체신호로 부터 자폐아동의 정서 상태를 인지하기 위한 생체신호 감지 모듈, 가상현실 환경에서 자폐아동이 감성 에이전트와 사회적 상호작용을 하면서 다양한 진단 및 치료 시나리오를 수행하기 위한 가상 감성 에이전트 환경 모듈, 역감 교류(haptic interface)장치를 이용하여 자폐아동의 행동 입력이 가능하게 하고, 힘 반력을 자폐아동에게 전달해 주기 위한 역감 교류 모듈로 구성된다. 본 논문에서 제안한 시스템을 통해 자폐스펙트럼장애를 객관적으로 진단할 수 있으며, 생활 속에서 지속적인 치료를 가능하게 할 수 있을 것으로 기대된다.

  • PDF

자연어처리와 기계학습을 통한 우울 감정 분석과 인식 (Analysis and Recognition of Depressive Emotion through NLP and Machine Learning)

  • 김규리;문지현;오유란
    • 문화기술의 융합
    • /
    • 제6권2호
    • /
    • pp.449-454
    • /
    • 2020
  • 본 논문에서는 SNS에 게시된 글의 내용을 통해 사용자의 우울함을 검출하는 기계학습 기반 감성 분석 시스템을 제안한다. 게시한 글의 작성자가 기분을 파악하는 시스템을 구현하기 위해 먼저 감정 사전에서 우울한 감정의 단어와 그렇지 않은 감정과 관련된 단어를 목록화하였다. 그 후, SNS를 대표하는 서비스 중 하나인 트위터의 텍스트 자료에서 검색 키워드를 선정하고 크롤링을 시행하여 우울한 감정을 띤 문장 1297개와 그렇지 않은 문장 1032개로 이뤄진 학습 데이터셋을 구축하였다. 마지막으로 텍스트 기반 우울감 검출 목적에 가정 적합한 기계학습 모델을 찾기 위해 수집한 데이터셋을 바탕으로 순환신경망, 장단기메모리, 그리고 게이트 순환 유닛을 비교 평가하였고, 그 결과 GRU 모델이 다른 모델들보다 2~4%가량의 높은 92.2%의 정확도를 보임을 확인하였다. 이 연구 결과는 SNS상의 게시글을 토대로 사용자의 우울증을 예방하거나 치료를 유도하는 데 활용될 수 있을 것이다.

Arousal and Valence Classification Model Based on Long Short-Term Memory and DEAP Data for Mental Healthcare Management

  • Choi, Eun Jeong;Kim, Dong Keun
    • Healthcare Informatics Research
    • /
    • 제24권4호
    • /
    • pp.309-316
    • /
    • 2018
  • Objectives: Both the valence and arousal components of affect are important considerations when managing mental healthcare because they are associated with affective and physiological responses. Research on arousal and valence analysis, which uses images, texts, and physiological signals that employ deep learning, is actively underway; research investigating how to improve the recognition rate is needed. The goal of this research was to design a deep learning framework and model to classify arousal and valence, indicating positive and negative degrees of emotion as high or low. Methods: The proposed arousal and valence classification model to analyze the affective state was tested using data from 40 channels provided by a dataset for emotion analysis using electrocardiography (EEG), physiological, and video signals (the DEAP dataset). Experiments were based on 10 selected featured central and peripheral nervous system data points, using long short-term memory (LSTM) as a deep learning method. Results: The arousal and valence were classified and visualized on a two-dimensional coordinate plane. Profiles were designed depending on the number of hidden layers, nodes, and hyperparameters according to the error rate. The experimental results show an arousal and valence classification model accuracy of 74.65 and 78%, respectively. The proposed model performed better than previous other models. Conclusions: The proposed model appears to be effective in analyzing arousal and valence; specifically, it is expected that affective analysis using physiological signals based on LSTM will be possible without manual feature extraction. In a future study, the classification model will be adopted in mental healthcare management systems.

암묵 데이터를 활용한 인문학 인풋값과 다중 모달리티의 가중치 할당 방법에 관한 연구 (A Study on the Weight Allocation Method of Humanist Input Value and Multiplex Modality using Tacit Data)

  • 이원태;강장묵
    • 한국인터넷방송통신학회논문지
    • /
    • 제14권4호
    • /
    • pp.157-163
    • /
    • 2014
  • 이용자의 감성은 그 어느 때보다 기업, 정부 그리고 개인 간의 소통에서 중요한 변수로 인식된다. 특히 수많은 연구에서 이용자의 감성을 파악하는 방법으로 음성 톤, 속도, 얼굴 표정, 몸의 이동 방향과 속도, 제스쳐 등이 사용된다. 다중 모달리티는 단일의 모달리티보다 정확도가 높은 반면 멀티 센싱에 따른 인식률 한계와 데이터 처리 부하 그리고 센싱된 값을 추론하는 우수한 알고리즘이 요구된다. 즉 다중 모달리티는 각 모달리티의 개념, 속성이 상이하여 인간의 감성값이라는 표준화된 값으로 전환하는데 오류가 발생할 수 있다. 이 문제를 해결하기 위해 다중 모발리티 중관계망 분석, 문맥 파악, 디지털 필터 등의 기술을 이용하여 이용자에게 우선 순위를 갖는 감성 표현 모달리티를 추출할 필요가 있다. 특정 상황에 우선 순위를 갖는 모달리티와 그 주변을 에워싼 다른 모발리티를 암묵 값으로 처리하면 감성 인식에 있어 컴퓨터 자원의 소비 대비 견고한 시스템을 구성할 수 있다. 본 연구 결과, 암묵 데이터를 활용하여 다중 모발리티 중 가중치를 어떻게 부여할지에 대하여 제안하였다.

임상치과위생사들의 일가치감 및 그 결정요인에 관한 연구 (A study on perceived value of work among the clinical dental hygienists and its determinants)

  • 윤희숙;김영선
    • 한국치위생학회지
    • /
    • 제7권4호
    • /
    • pp.495-508
    • /
    • 2007
  • This study, to investigate the state of PVW among the clinical dental hygienists and its determinants, has polled 322 clinical dental hygienists working in Daegu, Kyung buk province, and Ulsan. Data were collected by self-administrated questionnaire. A SPSS 12.0 for Windows was used for statistical analysis. The obtained results were as follows: 1. The average of PVW among the respondents was 3.43. 2. The area average of PVW determinants was as follows; job significance, 3.31, process efficiency, 3.42, product usefulness, 3.32, vision realizability, 3.53, social recognition, 3.23 and the total average, 3.36. 3. The married have higher PVW than the unmarried in all areas(p=.012, p=.008, p=.036, p=.007). 4. As for working experience, in the case of perceived self value, those having 1~2 years experience have the highest PVW(p=.000), apart from perceived self value, those having over 6 years experience have the highest PVW in all areas(p=.015, p=.001, p=.002). Relating to the task, those working in the patient consulting and managing part have the highest PVW, relating to the annual salary, those having over 25 million won have the highest PVW(p=.000, p=.000, p=.001, p=.000). 5. The relationship between PVW and PVW determinants, in all respects, is meaningful, so it was found that the higher determinants are, the higher PVW is. 6. The whole explanation variate of PVW determinants was meaningful in PVW, perceived self value, value fulfillment emotion, respectively representing 38.8%, 55.6%, 61.5%(pE.001). PVW of clinical dental hygienists should be considered as a significant criterion of indivisual and organizational effectiveness. To improve effectually PVW of the clinical dental hygienists, there is need to establish culture in a system of hospital that redound to their social recognition.

  • PDF