• 제목/요약/키워드: Extract Emotion

검색결과 134건 처리시간 0.035초

RoutingConvNet: 양방향 MFCC 기반 경량 음성감정인식 모델 (RoutingConvNet: A Light-weight Speech Emotion Recognition Model Based on Bidirectional MFCC)

  • 임현택;김수형;이귀상;양형정
    • 스마트미디어저널
    • /
    • 제12권5호
    • /
    • pp.28-35
    • /
    • 2023
  • 본 연구에서는 음성감정인식의 적용 가능성과 실용성 향상을 위해 적은 수의 파라미터를 가지는 새로운 경량화 모델 RoutingConvNet(Routing Convolutional Neural Network)을 제안한다. 제안모델은 학습 가능한 매개변수를 줄이기 위해 양방향 MFCC(Mel-Frequency Cepstral Coefficient)를 채널 단위로 연결해 장기간의 감정 의존성을 학습하고 상황 특징을 추출한다. 저수준 특징 추출을 위해 경량심층 CNN을 구성하고, 음성신호에서의 채널 및 공간 신호에 대한 정보 확보를 위해 셀프어텐션(Self-attention)을 사용한다. 또한, 정확도 향상을 위해 동적 라우팅을 적용해 특징의 변형에 강인한 모델을 구성하였다. 제안모델은 음성감정 데이터셋(EMO-DB, RAVDESS, IEMOCAP)의 전반적인 실험에서 매개변수 감소와 정확도 향상을 보여주며 약 156,000개의 매개변수로 각각 87.86%, 83.44%, 66.06%의 정확도를 달성하였다. 본 연구에서는 경량화 대비 성능 평가를 위한 매개변수의 수, 정확도간 trade-off를 계산하는 지표를 제안하였다.

한글 글꼴과 감성 표현어 사이의 수량적 상호관계에 관한 연구 (A study of quantitative correlation between hangul font and the emotional expressions)

  • 이정미
    • 한국감성과학회:학술대회논문집
    • /
    • 한국감성과학회 2008년도 추계학술대회
    • /
    • pp.46-49
    • /
    • 2008
  • This study aims to suggest basic materials to develop an emotional font for future Hangeul font development plan by investigating emotional reaction displayed through the subjects and by quantifying its contribution of the stimulation elements causing such reaction. For this, a survey of 150 university students who are currently enrolled in the College of Design was conducted in order to analyze correlation between 30 emotional words extracted from the Hangeul font and the selected 36 sample fonts. The combined data was described with the two dimensional dispersion using the quantification theory type III. The analysis found out that the Hangeul font forms the x-axis showing "soft(dynamic).hard(static)" and the y-axis showing "modern(light).classic(heavy)”. Specifically, there exist emotional groups such as "archaic","masculine","feminine","negative", and "modern static"on each axis. In addition, to extract the casual relationship between the value of emotional reaction and its stimulation elements quantitatively, the author indicated the emotional words of each axis and the total value of equivalent five emotional word groups as the standard variance and the constituent of Hangeul font as the independent variable, and then the quantification theory type I was used to analyze the physical elements of the Hangeul font. As a result, "the centerline of gravity(base line)" and "thickness variance of a stroke" on the two axes, and "the centerline of gravity(base line)" and "decoration" among the five groups were identified as the most influential elements that affect the emotional reaction of the subjects.

  • PDF

비전 방식을 이용한 감정인식 로봇 개발 (Development of an Emotion Recognition Robot using a Vision Method)

  • 신영근;박상성;김정년;서광규;장동식
    • 산업공학
    • /
    • 제19권3호
    • /
    • pp.174-180
    • /
    • 2006
  • This paper deals with the robot system of recognizing human's expression from a detected human's face and then showing human's emotion. A face detection method is as follows. First, change RGB color space to CIElab color space. Second, extract skin candidate territory. Third, detect a face through facial geometrical interrelation by face filter. Then, the position of eyes, a nose and a mouth which are used as the preliminary data of expression, he uses eyebrows, eyes and a mouth. In this paper, the change of eyebrows and are sent to a robot through serial communication. Then the robot operates a motor that is installed and shows human's expression. Experimental results on 10 Persons show 78.15% accuracy.

모바일 환경에서 감성을 기반으로 한 영상 합성 기법 연구 및 개발 (Research and Development of Image Synthesis Model Based on Emotion for the Mobile Environment)

  • 심승민;이지연;윤용익
    • 한국컴퓨터정보학회논문지
    • /
    • 제18권11호
    • /
    • pp.51-58
    • /
    • 2013
  • 최근 스마트폰 카메라의 성능은 디지털 카메라 못지않게 발전하고 있다. 이에 따라 점점 더 많은 사람들이 사진촬영을 하게 되고, 사진 관련 어플리케이션에 대한 관심은 꾸준히 증가하고 있다. 하지만 현재 나와 있는 사진 합성 프로그램은 여러 장의 사진을 배치하는 방법, 기존 이미지를 플러그인 이미지에 포개는 방법 등으로 단순한 합성 프로그램에 머물러 있는 실정이다. 본 논문에서 제안하는 모델은 얼굴 표정에서 추출한 감정을 기반으로 이에 맞는 배경을 합성하고 효과 필터를 적용하여 기존 사진 합성 프로그램보다 다양한 분야에서 활용할 수 있는 확장성을 가진 기법을 제시하였다.

공동주택 소음에 대한 감성 평가 (IDENTIFYING EMOTIONAL ELEMENTS OF APARTMENT NOISE)

  • 민윤기;은희준;조문재;손진훈
    • 한국감성과학회:학술대회논문집
    • /
    • 한국감성과학회 1999년도 춘계학술발표논문집 논문집
    • /
    • pp.39-44
    • /
    • 1999
  • The purpose of this study was to extract emotional dimensions from Korean adjectives relating to apartment noise. Noise-related 296 Korean adjectives were extracted from a dictionary and three evaluators selected 96 adjectives from those by removing very similar ones in meaning. Two types of 96 7-point scales were conducted to college students for evaluation, whether each adjective describes apartment noise appropriately. From this evaluation, 28 adjectives having above 4.5 points were selected. Again, 8 different types of 7-point scales on 378 adjective pairs(28 x 27/2) were administrated to separate college students to evaluate the degree of similarity between 28 adjectives. Based upon this evaluation, 14 adjectives were finally selected and scores on similarity sere analyzed through two different statistical analyses (Multi-dimensional scale and Cluster analysis). The results showed that three dimensions (displeasure, sensitivity and perceived loudness) exist in peoples' emotional response state to apartment noise. The previous studies have treated annoyance and sensitivity as separate measures to noise. However, this study showed that these two factors were on the same emotional dimension labeled as 'sensitivity' In addition, new dimension, labeled as 'displeasure', was found.

  • PDF

감성제품개발을 위한 감성 이미지 디자인 프로세스 개발에 관한 연구 (A Study on the Development of Image Design Process Based on Human Sensibility Ergonomics for Product Development)

  • 이순요;양선모;변상섭
    • 한국감성과학회:학술대회논문집
    • /
    • 한국감성과학회 1997년도 한국감성과학회 연차학술대회논문집
    • /
    • pp.33-36
    • /
    • 1997
  • This paper describes an image design process for product development based on human sensibility ergonomics.. The human sensibility about product image can be measured through some statistical methods and translated into product design factors by some mathematical inference logics. This results also can be presented by 3D computer graphic tools, In order to integrate the above processess, a image design process on human sensibility database. Human sensibility database is constructed with the relational ddta of some adjective words and design factors, The next step is to extract the design information from the human sensibility dataabase by fuzzy inference algouithm. This information is used for the input data for the graphic presentation. The final product can be modified according to the customer's requirement.

  • PDF

Extracting Method of Kansei Design Rules Based on Rough Set Analysis

  • Nishino, Tatsuo;Nagamachi, Mitsuo
    • 한국감성과학회:학술대회논문집
    • /
    • 한국감성과학회 2002년도 춘계학술대회 논문집
    • /
    • pp.201-204
    • /
    • 2002
  • Kansei design knowledge acquisition stage is a crucial stage in kansei designing process and kansei engineering (KE) methodology. In kansei engineering methodology, it is essential to extract design knowledge or rules on relationships between customer's kansei and product design element. We attempt to construct a more powerful melted for extracting the design rules from kansei expremental data. We constucted a kansei experiment concerning color kansei evaluation, and analyzed the sane data by both conventional quantification theory type I and rough set theory. Finally, we compared the effectiveness of both methods for extracting rules and examined the extensions of rough set theory in kansei engineering.

  • PDF

전통적 조형의 창출을 통한 디자인 개발에 관한 연구 (A STUDY ON THE DEVELOPMENT OF DESIGN TO THE EXTRACT OF TRADITIONAL SHAPE ELEMENT)

  • 이상락;홍정표
    • 한국감성과학회:학술대회논문집
    • /
    • 한국감성과학회 1999년도 춘계학술발표논문집 논문집
    • /
    • pp.81-87
    • /
    • 1999
  • 본 연구의 목적은 전통적 조형요소의 이해를 통하여 한국적 조형의 특성을 파악하고 효율적으로 디자인에 적용시킴으로써 차별화 된 제품개발을 하는데 있어 조형언어의 창출을 모색하는데 있다. 이를 위하여 전통도구들의 물적 특성을 통하여 우리의 환경과 삶의 태도에서 베어난 우리 고유의 도구에 대한 사고와 조형방법등에 대한 특질과 가치를 발견하고, 이를 바탕으로 우리만의 차별화된 디자인의 가능성과 방향성을 찾아보고자 하였다. 연구범위는 조선시대 일반서민들의 생활에서 사용되었던 도구를 그 대상으로 하였으며 전통제품들의 예시를 통하여 한국적인 조형성의 특징을 파악하였는데 이는 비교적 자료수집 등 연구가 용이하기 때문이다. 연구방법은 국내에서 출간된 관련서적과 사진 자료 및 그 동안 연구되어 왔던 각종 연구보고서, 각 대학의 디자인 관련학과에서 진행되어 온 컨셉츄얼 디자인(본 연구에서 설정된 조형적 적용방법과 같은 내용으로 디자인작업을 수행해온)을 토대로 하였다.

  • PDF

Emotion Analysis of Characters in a Comic from State Diagram via Natural Language-based Requirement Specifications

  • Ye Jin Jin;Ji Hoon Kong;Hyun Seung Son;R. Young Chul Kim
    • International journal of advanced smart convergence
    • /
    • 제13권1호
    • /
    • pp.92-98
    • /
    • 2024
  • The current software industry has an emerging issue with natural language-based requirement specifications. However, the accuracy of such requirement analysis remains a concern. It is noted that most errors still occur at the requirement specification stage. Defining and analyzing requirements based on natural language has become necessary. To address this issue, the linguistic theories of Chomsky and Fillmore are applied to the analysis of natural language-based requirements. This involves identifying the semantics of morphemes and nouns. Consequently, a mechanism was proposed for extracting object state designs and automatically generating code templates. Building on this mechanism, I suggest generating natural language-based comic images. Utilizing state diagrams, I apply changes to the states of comic characters (protagonists) and extract variations in their expressions. This introduces a novel approach to comic image generation. I anticipate highly productive comic creation by applying software processes to Cartoon ART.

스토리기반 저작물에서 감정어 분류에 기반한 등장인물의 감정 성향 판단 (Detection of Character Emotional Type Based on Classification of Emotional Words at Story)

  • 백영태
    • 한국컴퓨터정보학회논문지
    • /
    • 제18권9호
    • /
    • pp.131-138
    • /
    • 2013
  • 본 논문에서는 등장인물이 대사에서사용한감정어를 이용하여 등장인물의 감정 유형을 분류하는 방법을 제안하고 성능을 평가한다. 감정 유형은 긍정, 부정, 중립의 3 종류로 분류하며, 등장인물이 사용한 감정어를 누적하여 3 종류의 감정 유형 중에 어디에 속하는지를 파악한다. 대사로부터 감정어를 추출하기 위해 WordNet 기반의 감정어 추출 방법을 제안하고 감정어가 가진 감정 성분을 벡터로 표현하는 방식을 제안한다. WordNet은 영어 단어 간에 상위어와 하위어, 유사어 등의 관계로 연결된 네트워크 구조의 사전이다. 이 네트워크 구조에서 최상위의 감정항목과의 거리를 계산하여 단어별감정량을 계산하여 대사를 30 차원의 감정벡터로 표현한다. 등장인물별로 추출된 감정 벡터 성분들을 긍정, 부정, 중립의 3가지 차원으로 축소하여 표현한 후, 등장인물의 감정 성향이 어떻게 나타나는지를 추출한다. 또한 감정 성향의 추출 성능에 대해 헐리우드 영화 4개의 영화에서 12명의 등장인물을 선정하여 평가하여 제안한 방법의 효율성을 측정하였다. 대사는 영어로 이루어진 대사만을 사용하였다. 추출된 감정 성향 판단 성능은 75%의 정확도로 우수한 추출 성능을 나타내었다.