• 제목/요약/키워드: Facial Model

검색결과 519건 처리시간 0.028초

3D 얼굴 모델 기반의 GAN을 이용한 게임 캐릭터 회전 기법 (A GAN-based face rotation technique using 3D face model for game characters)

  • 김한동;한종대;양희경;민경하
    • 한국게임학회 논문지
    • /
    • 제21권3호
    • /
    • pp.13-24
    • /
    • 2021
  • 본 논문은 게임 캐릭터 얼굴 일러스트레이션에 적용할 수 있는 안면 회전 기술(Face rotation) 기술을 제안한다. 기존의 진행된 연구들은 실제 사람의 얼굴 데이터에 대해서로 데이터를 한정하였으며 방대한 양의 데이터를 필요로 하였고 합성된 결과물이 좋지 못한 문제가 있었다. 본 논문에서는 기존 연구들의 존재하는 문제를 해결하기 위해 다음과 같은 방법을 도입하였다. 첫째, 입력 이미지가 갖고 있는 특징을 입힌 3D 모델을 회전시키고 다시 2D 이미지로 렌더링하여 학습 및 평가에 필요한 데이터 셋을 구축하였다. 둘째, 3D 모델을 통해 구축된 데이터에서 다양한 각도의 특징을 학습할 수 있는 적대적 생성 모델(Generative Adversarial Networks)을 설계하여 입력된 이미지를 원하는 각도로 합성할 수 있다. 논문에서는 실제 게임 캐릭터 얼굴 일러스트레이션 합성 결과를 제시한다. 합성 결과를 통해 논문에서 제안하는 방법이 잘 동작함을 확인할 수 있다.

한국형 멀티모달 몽타주 앱을 위한 생성형 AI 연구 (Research on Generative AI for Korean Multi-Modal Montage App)

  • 임정현;차경애;고재필;홍원기
    • 서비스연구
    • /
    • 제14권1호
    • /
    • pp.13-26
    • /
    • 2024
  • 멀티모달 (multi-modal) 생성이란 텍스트, 이미지, 오디오 등 다양한 정보를 기반으로 결과를 도출하는 작업을 말한다. AI 기술의 비약적인 발전으로 인해 여러 가지 유형의 데이터를 종합적으로 처리해 결과를 도출하는 멀티모달 기반 시스템 또한 다양해지는 추세이다. 본 논문은 음성과 텍스트 인식을 활용하여 인물을 묘사하면, 몽타주 이미지를 생성하는 AI 시스템의 개발 내용을 소개한다. 기존의 몽타주 생성 기술은 서양인들의 외형을 기준으로 이루어진 반면, 본 논문에서 개발한 몽타주 생성 시스템은 한국인의 안면 특징을 바탕으로 모델을 학습한다. 따라서, 한국어에 특화된 음성과 텍스트의 멀티모달을 기반으로 보다 정확하고 효과적인 한국형 몽타주 이미지를 만들어낼 수 있다. 개발된 몽타주 생성 앱은 몽타주 초안으로 충분히 활용 가능하기 때문에 기존의 몽타주 제작 인력의 수작업을 획기적으로 줄여줄 수 있다. 이를 위해 한국지능정보사회진흥원의 AI-Hub에서 제공하는 페르소나 기반 가상 인물 몽타주 데이터를 활용하였다. AI-Hub는 AI 기술 및 서비스 개발에 필요한 인공지능 학습용 데이터를 구축하여 원스톱 제공을 목적으로 한 AI 통합 플랫폼이다. 이미지 생성 시스템은 고해상도 이미지를 생성하는데 사용하는 딥러닝 모델인 VQGAN과 한국어 기반 영상생성 모델인 KoDALLE 모델을 사용하여 구현하였다. 학습된 AI 모델은 음성과 텍스트를 이용해 묘사한 내용과 매우 유사한 얼굴의 몽타주 이미지가 생성됨을 확인할 수 있다. 개발된 몽타주 생성 앱의 실용성 검증을 위해 10명의 테스터가 사용한 결과 70% 이상이 만족한다는 응답을 보였다. 몽타주 생성 앱은 범죄자 검거 등 얼굴의 특징을 묘사하여 이미지화하는 여러 분야에서 다양하게 사용될 수 있을 것이다.

인간의 비언어적 행동 특징을 이용한 다중 사용자의 상호작용 의도 분석 (Interaction Intent Analysis of Multiple Persons using Nonverbal Behavior Features)

  • 윤상석;김문상;최문택;송재복
    • 제어로봇시스템학회논문지
    • /
    • 제19권8호
    • /
    • pp.738-744
    • /
    • 2013
  • According to the cognitive science research, the interaction intent of humans can be estimated through an analysis of the representing behaviors. This paper proposes a novel methodology for reliable intention analysis of humans by applying this approach. To identify the intention, 8 behavioral features are extracted from the 4 characteristics in human-human interaction and we outline a set of core components for nonverbal behavior of humans. These nonverbal behaviors are associated with various recognition modules including multimodal sensors which have each modality with localizing sound source of the speaker in the audition part, recognizing frontal face and facial expression in the vision part, and estimating human trajectories, body pose and leaning, and hand gesture in the spatial part. As a post-processing step, temporal confidential reasoning is utilized to improve the recognition performance and integrated human model is utilized to quantitatively classify the intention from multi-dimensional cues by applying the weight factor. Thus, interactive robots can make informed engagement decision to effectively interact with multiple persons. Experimental results show that the proposed scheme works successfully between human users and a robot in human-robot interaction.

전자신용보증 제도의 전략적 활용과 B2B e-Marketplace의 활성화 (A Study on the Promotion of B2B e-Marketplace by the Strategic Use of e-Credit Guarantee System)

  • 이금룡;삼성렬
    • 한국디지털정책학회:학술대회논문집
    • /
    • 한국디지털정책학회 2005년도 춘계학술대회
    • /
    • pp.145-175
    • /
    • 2005
  • In 2001, e-Credit guarantee system was introduced by the Korea Credit Guarantee Fund(KCGF) to extends the credit guarantee services for the purchasing amount on credit in the B2B e-Marketplace. It combines both the merits of bill of exchange and credit card and eliminates the uneasiness related to the unpaid accounts due to the non-facial e-Marketplace. The purpose of this paper is to empirically analyze both the causal relationship and influences among theoretical variables by the structural equation model(SEM). e-Credit guarantee system can be a good strategy for promoting B2R e-Marketplace. The level of application of e-Credit guarantee system is attributable to both the characteristics of B2B e-Marketplace and products. The cost reduction or saving in purchasing procedures, production and stockpiling will be possible through e-Credit guarantee system. The close linkage of financial institutions with the enterprises based on e-Credit guarantee system will further promote B2B e-Marketplace in Korea.

  • PDF

Simpson Style Caricature based on MLS

  • Lee, Jiye;Byun, Hae Won
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제7권6호
    • /
    • pp.1449-1462
    • /
    • 2013
  • We present a novel approach to producing facial caricature with Simpson cartoon style based on Moving Least Squares (MLS). We take advantage of employing the caricature stylization rule of caricature artist, Justin. Our method allows Simpson-style cartoon character similar to user's features by using Justin's technique, which is a set of caricature stylization rules. Our method transforms input photo image into Simpson style caricature by using MLS approximation. The unique characteristics of user in the photo can be detected by comparing to the mean face feature and the input face feature extracted by AAM(Active Appearance Model). To exaggerate the detected unique characteristics, we set up the exaggeration rules using Justin's technique. In addition, during the cartooning process, user's hairs and accessories are used to the deformed image to make a close resemblance. Our method preserves the reliable and stylized caricature through the exaggeration rules of the actual caricature artist's techniques. From this study, we can easily create a Simpson-style cartoon caricature to resemble user's features by combining a caricature with existing cartoon researches.

Sign Language Translation Using Deep Convolutional Neural Networks

  • Abiyev, Rahib H.;Arslan, Murat;Idoko, John Bush
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제14권2호
    • /
    • pp.631-653
    • /
    • 2020
  • Sign language is a natural, visually oriented and non-verbal communication channel between people that facilitates communication through facial/bodily expressions, postures and a set of gestures. It is basically used for communication with people who are deaf or hard of hearing. In order to understand such communication quickly and accurately, the design of a successful sign language translation system is considered in this paper. The proposed system includes object detection and classification stages. Firstly, Single Shot Multi Box Detection (SSD) architecture is utilized for hand detection, then a deep learning structure based on the Inception v3 plus Support Vector Machine (SVM) that combines feature extraction and classification stages is proposed to constructively translate the detected hand gestures. A sign language fingerspelling dataset is used for the design of the proposed model. The obtained results and comparative analysis demonstrate the efficiency of using the proposed hybrid structure in sign language translation.

Radial Basis Function 을 이용한 특징점 기반 3 차원 얼굴 모델의 변형 (Feature-Based Deformation of 3D Facial Model Using Radial Basis Function)

  • 권오륜;민경필;전준철
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2006년도 춘계학술발표대회
    • /
    • pp.715-718
    • /
    • 2006
  • 아바타를 이용한 얼굴 애니메이션은 가상 현실이나 엔터테인먼트와 같은 분야에서 많이 적용된다. 얼굴 애니메이션을 생성하는 방법에는 크게 3 차원 모델을 직접 변형시키는 기하학적인 변형 방법과 2 차원 이미지의 워핑이나 모핑방법을 이용한 이미지 변형 방법이 있다. 기하학적인 변형 방법 중 3 차원 모델을 변형시키기 위한 방법으로 RBF(Radial Basis Function)을 이용하는 방법이 있다. RBF 함수를 이용하여 모델의 부드러운 변형을 만들 수 있다. 이 방법은 모델의 임의의 한 점을 이동하게 되면 영향을 받는 정점들을 좀 더 자연스럽게 이동시킴으로써 자연스러운 애니메이션을 생성할 수 있다. 본 연구에서는 RBF 를 이용하여 3 차원 얼굴 메쉬 모델의 기하학적 변형을 통해 모델의 얼굴 표정을 생성하는 방법에 대해 제안하고자 한다. 얼굴 모델 변형을 위해 얼굴의 특징인 눈, 입, 턱 부분에 특징점을 정하고 각 특징점에 따라 영향을 받는 영역을 정하기 위해 얼굴 모델을 지역적으로 클러스터링한다. 각 특징점에 따라 영향을 받는 영역에 대해 클러스터링을 적용하고 RBF 를 이용하여 자연스러운 얼굴 표정을 생성하는 방법을 제안한다.

  • PDF

비인강암의 수술적 치료 (Surgical Treatment of the Nasopharyngeal Carcinoma)

  • 이원상;전영명;최흥식
    • 대한두경부종양학회지
    • /
    • 제12권1호
    • /
    • pp.92-99
    • /
    • 1996
  • The primary treatment of the nasopharyngeal carcinoma is at this time, mainly based on radiotherapy. In most studies for patient treated with radiotherapy, overall 5-year survival rate is in the range of 35 to 55%. Obviously, these therapeutic results may be influenced by various factors such as clinical stages, histopathological types and radiation techniques, etc. Though the radiotherapy had a good therapeutic result, there is a limitation to apply the radiotherapy only in cases of the advanced nasopharyngeal carcinoma. Anatomical complexity of the skull base and difficulties in complete surgical intervention were the trouble of the surgery but in the case of radiation failure, there is no adequate choice of other curative modalities. So it is appropriate to investigate whether surgical resection may improve the outcome of treatment of nasopharyngeal carcinoma. The purpose of this papaer is to report our surgical experience of the nasopharyngeal carcinoma, then to take into consideration of the new model of treatment strategy of nasopharyngeal carcinoma.

  • PDF

이하두정 방사선 사진을 이용한 악교정수술 계획의 유용성에 대한 평가 (EVALUATION OF THE AVAILABILITY OF SURGICAL TREATMENT OBJECTIVE(STO) USING SUBMENTOVERTEX(SMV) VIEW)

  • 김범수;김종완;김영균;윤필영
    • Journal of the Korean Association of Oral and Maxillofacial Surgeons
    • /
    • 제35권5호
    • /
    • pp.324-328
    • /
    • 2009
  • Submentovertex(SMV) projection shows the base of skull, positions of mandibular condyle and zygomatic arches. We would like to investigate how to use SMV and evaluate its availability for the construction of the plan for orthognathic surgery of mandible prognathism and asymmetry. Preoperative Surgical Treatment Objective(STO) using SMV was performed to 12 patients, who visited to Seoul National University Bundang Hospital with chief complaints like mandible prognathism or asymmetry from Dec 2007 to Feb 2009. Surgical splint was made of stone model repositioned according to STO using SMV. We estimate the change in skeletal midline and the stability of occlusion through superposition between preoperative and postoperative SMV. It was effective on the amount of mandible movement and the correction of mandibular asymmetry, while the facial asymmetry involved with maxilla was excluded. It was concluded that STO using SMV is available and predictable method for not only the setback of prognathic mandible but also the correction of mandible asymmetry accurately.

Development of a Violence Prevention Educational Program for Elementary School Children Using Empathy (VPEP-E)

  • Kang, So Ra;Kim, Shin-Jeong;Lee, Jungmin
    • Child Health Nursing Research
    • /
    • 제26권4호
    • /
    • pp.422-433
    • /
    • 2020
  • Purpose: This study describes the development of a violence prevention educational program for elementary school children using empathy (VPEP-E) that teachers can use during class. Methods: Hoffman's theory of empathy and Seels and Richey's (1994) ADDIE model were applied to develop this program. Results: The developed program consisted of eight sessions: "Orientation/definition of violence and empathy", "Types and boundaries of violence", "Look into my feelings", "Say it with a facial expression", "Preventing non-empathic violence due to social prejudice", "Preventing physical violence", "Verbal and online violence prevention: empathic conversation", and "I can do well: review of the whole curriculum". The program was evaluated by 15 elementary school teachers, who considered it to be easily accessible to elementary school students. The final VPEP-E, which will be provided in eight times for 40 minutes each for fifth-grade students, will provide a basis for preventing violence by fostering empathy. Conclusion: We expect the developed educational program to be effective in preventing violence among elementary school students. However, further research involving children from various age groups is needed.