• 제목/요약/키워드: 3D face reconstruction

검색결과 54건 처리시간 0.025초

구조 광 영상을 이용한 3차원 얼굴 복원 (3D Faces Reconstruction Using Structured Light Images)

  • 이득용;오일석
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2008년도 춘계 종합학술대회 논문집
    • /
    • pp.15-18
    • /
    • 2008
  • 본 논문은 구조 광 영상을 이용하여 3차원 얼굴을 복원하는 방법을 제안한다. 프로젝터와 카메라의 시선벡터가 평행하다고 가정한다. 먼저 격자 형태의 구조 광을 배경에 투영하고 참조 구조 광 영상을 획득한다. 참조 구조 광 영상을 사용하여 카메라와 프로젝터를 보정한다. 이후 사람의 얼굴에 동일한 형태의 구조 광을 투영하고 얼굴 구조 광 영상을 획득한다. 획득한 두 종류의 구조 광 영상에서 추출된 특징 점들의 위치 변화를 측정하고 측정된 변화량으로 3차원 얼굴을 복원 한다. 실험 결과를 보면, 이런 간단한 장치를 통해 사람이 인식할 수 있을 정도의 3차원 얼굴 영상을 얻을 수 있음을 알 수 있다.

  • PDF

Analogical Face Generation based on Feature Points

  • Yoon, Andy Kyung-yong;Park, Ki-cheul;Oh, Duck-kyo;Cho, Hye-young;Jang, Jung-hyuk
    • Journal of Multimedia Information System
    • /
    • 제6권1호
    • /
    • pp.15-22
    • /
    • 2019
  • There are many ways to perform face recognition. The first step of face recognition is the face detection step. If the face is not found in the first step, the face recognition fails. Face detection research has many difficulties because it can be varied according to face size change, left and right rotation and up and down rotation, side face and front face, facial expression, and light condition. In this study, facial features are extracted and the extracted features are geometrically reconstructed in order to improve face recognition rate in extracted face region. Also, it is aimed to adjust face angle using reconstructed facial feature vector, and to improve recognition rate for each face angle. In the recognition attempt using the result after the geometric reconstruction, both the up and down and the left and right facial angles have improved recognition performance.

Reverse Engineering 기술을 적용한 복합면의 재구성 정보 추출을 위한 연구 (The Study on Reconstruction of Composite Surfaces by Reverse Engineering Techniques)

  • 서지한;이홍철;손영태;박세형
    • 산업공학
    • /
    • 제12권2호
    • /
    • pp.205-209
    • /
    • 1999
  • In reverse engineering area, the reconstruction of surfaces from scanned or digitized data is being developed, but geometric model of existing objects is not available in industries. This paper presents the new approach to the reconstruction of surface technique. A proposed methodology finds base geometry and blends surface between them. Each based geometry is divided by tri-angular patches which are compared with their normal vector for face grouping. Each group is categorized analytical surface such as a part of cylinder, sphere and cone, and plane shapes to represent the based geometry surface. And then, each based geometry surface is implemented to the infinitive surface. Infinitive surface's intersections are trimmed by boundary representation model reconstruction. This method has several benefits such as time efficiency and automatic functional modeling system in reverse engineering. Especially, it can be directly applied 3D fax and 3D copier.

  • PDF

딥러닝과 구체의 형태 변형 방법을 이용한 단일 이미지에서의 3D Mesh 재구축 기법 (3D Mesh Reconstruction Technique from Single Image using Deep Learning and Sphere Shape Transformation Method)

  • 김정윤;이승호
    • 전기전자학회논문지
    • /
    • 제26권2호
    • /
    • pp.160-168
    • /
    • 2022
  • 본 논문에서는 딥러닝과 구체의 형태 변형 방법을 이용한 단일 이미지에서의 3D mesh 재구축 기법을 제안한다. 제안한 기법은 기존의 방식과 다른 다음과 같은 독창성이 있다. 첫 번째, 기존의 근처의 가까운 점들을 연결하여 모서리 또는 면을 구축하는 방식과 다르게 딥러닝 네트워크을 통하여 구체의 꼭짓점의 위치를 사물의 3D 포인트 클라우드와 매우 유사하게 수정한다. 3D 포인트 클라우드를 이용하므로 메모리가 적게 필요하며 구체의 꼭짓점에 오프셋 값 사이에 덧셈 연산만을 수행하기 때문에 더 빠른 연산이 가능하다. 두 번째, 수정한 꼭짓점에 구체의 면 정보를 씌워 3D mesh를 재구축한다. 구체의 꼭짓점의 위치를 수정하여 생성한 3D 포인트 클라우드의 점들의 간격이 일정하지 않을 때에도 이미 점들 사이의 연결 여부를 나타내는 구체의 면 정보라는 3D mesh의 면 정보를 가지고 있어 표현의 단순화나 결손을 방지할 수 있다. 제안하는 기법의 객관적인 신뢰성을 평가하기 위해 공개된 표준 데이터셋인 ShapeNet 데이터셋을 이용하여 비교 논문들과 같은 방법으로 실험한 결과, 본 논문에서 제안하는 기법의 IoU 값이 0.581로, chamfer distance 값은 0.212로 산출되었다. IoU 값은 수치가 높을수록, chamfer distance 값은 수치가 낮을수록 우수한 결과를 나타내므로 다른 논문에서 발표한 기법들보다 3D mesh 재구축의 결과에서 성능의 효율성이 입증되었다.

3차원 얼굴 복원을 위한 구조 광 영상에서의 2차원 메쉬 추출 (Extracting 2D-Mesh from Structured Light Image for Reconstructing 3D Faces)

  • 이득용;오일석
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2007년도 추계 종합학술대회 논문집
    • /
    • pp.248-251
    • /
    • 2007
  • 본 논문은 3차원 얼굴 영상을 복원하기 위해 구조 광(structured light) 영상에서 2차원 메쉬를 추정하는 방법을 제안한다. 프로젝터를 사용하여 얼굴에 구조 광을 투영하고 카메라로 찍어 구조 광 영상을 획득한다. 획득한 영상에서 투영된 격자점을 추출한다. 격자점들의 위치와 각도를 사용하여 2차원 메쉬를 추출한다. 추출 과정에서 발생한 오류를 편집하고 정확한 2차원 메쉬를 추출한다.

  • PDF

Real-time Markerless Facial Motion Capture of Personalized 3D Real Human Research

  • Hou, Zheng-Dong;Kim, Ki-Hong;Lee, David-Junesok;Zhang, Gao-He
    • International Journal of Internet, Broadcasting and Communication
    • /
    • 제14권1호
    • /
    • pp.129-135
    • /
    • 2022
  • Real human digital models appear more and more frequently in VR/AR application scenarios, in which real-time markerless face capture animation of personalized virtual human faces is an important research topic. The traditional way to achieve personalized real human facial animation requires multiple mature animation staff, and in practice, the complex process and difficult technology may bring obstacles to inexperienced users. This paper proposes a new process to solve this kind of work, which has the advantages of low cost and less time than the traditional production method. For the personalized real human face model obtained by 3D reconstruction technology, first, use R3ds Wrap to topology the model, then use Avatary to make 52 Blend-Shape model files suitable for AR-Kit, and finally realize real-time markerless face capture 3D real human on the UE4 platform facial motion capture, this study makes rational use of the advantages of software and proposes a more efficient workflow for real-time markerless facial motion capture of personalized 3D real human models, The process ideas proposed in this paper can be helpful for other scholars who study this kind of work.

A Novel Approach to Mugshot Based Arbitrary View Face Recognition

  • Zeng, Dan;Long, Shuqin;Li, Jing;Zhao, Qijun
    • Journal of the Optical Society of Korea
    • /
    • 제20권2호
    • /
    • pp.239-244
    • /
    • 2016
  • Mugshot face images, routinely collected by police, usually contain both frontal and profile views. Existing automated face recognition methods exploited mugshot databases by enlarging the gallery with synthetic multi-view face images generated from the mugshot face images. This paper, instead, proposes to match the query arbitrary view face image directly to the enrolled frontal and profile face images. During matching, the 3D face shape model reconstructed from the mugshot face images is used to establish corresponding semantic parts between query and gallery face images, based on which comparison is done. The final recognition result is obtained by fusing the matching results with frontal and profile face images. Compared with previous methods, the proposed method better utilizes mugshot databases without using synthetic face images that may have artifacts. Its effectiveness has been demonstrated on the Color FERET and CMU PIE databases.

3차원 형상 재구성을 위한 새로운 복셀 칼라링 기법 (A New Voxel Coloring Method for 3D Shape Reconstruction)

  • 예수영;김효성;주재흠;남기곤
    • 전자공학회논문지CI
    • /
    • 제42권6호
    • /
    • pp.93-100
    • /
    • 2005
  • 본 논문에서는 3차원 형상 재구성을 위하여 기존 복셀 칼라링 기법의 색상 일관성에 대한 문턱값 문제를 해결하기 위한 새로운 복셀 칼라링 기법을 제안하였다. 제안 기법에서는 중심카메라의 광선분위에 있는 내부 복셀의 색상 일광성을 비교함으로써 최적의 문턱값을 결정하였다. 즉, 표면 복셀에 대한 색상 일관성과 내부 복셀의 색상 일관성 값을 비교함으로써 표면 복셀에 대한 최적의 문턱값을 찾아가도록 하였다. 또한 그래프 절단 기법을 적용하여 주위 복셀을 제거함으로써 표면 잡음을 감소시켰다. 제안된 방법은 기존의 알고리듬보다 빠르고 정확하게 3차원형상을 재구성 할 수 있었다.

3D 얼굴 복원 기술 분석 및 연구 동향 (A Survey and Trends on 3D Face Reconstruction Technologies)

  • 윤승욱;황본우;김갑기;임성재;최진성;구본기
    • 전자통신동향분석
    • /
    • 제27권3호
    • /
    • pp.12-21
    • /
    • 2012
  • 최근 3DTV, 입체 모니터, 입체 노트북 등이 출시되고, 3D 영화, 게임 등 3D 관련 산업이 성장하면서 관련 콘텐츠의 요구사항이 증가하고 있다. 특히, 3D 콘텐츠의 주요 요소 중 하나인 인체는 전통적으로 고가의 3D 스캐너를 이용해 모델링하는 방식을 주로 사용해 왔다. 하지만 근래에는 광학 기술 및 컴퓨팅 성능의 향상으로 구조광과 같은 능동 센서나 카메라로부터 획득한 영상을 기반으로 3D 인체 외형을 복원하는 연구가 각광을 받고 있다. 이런 추세에 발맞춰 본고에서는 인체 중에서도 사용자의 민감도가 높은 얼굴의 3D 복원 기술 및 연구 동향을 살펴보고, 다양한 응용을 목적으로 ETRI에서 개발 중인 3D 얼굴 복원 기술을 소개하고자 한다.

  • PDF

Realtime Facial Expression Representation Method For Virtual Online Meetings System

  • Zhu, Yinge;Yerkovich, Bruno Carvacho;Zhang, Xingjie;Park, Jong-il
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2021년도 추계학술대회
    • /
    • pp.212-214
    • /
    • 2021
  • In a society with Covid-19 as part of our daily lives, we had to adapt ourselves to a new reality to maintain our lifestyles as normal as possible. An example of this is teleworking and online classes. However, several issues appeared on the go as we started the new way of living. One of them is the doubt of knowing if real people are in front of the camera or if someone is paying attention during a lecture. Therefore, we encountered this issue by creating a 3D reconstruction tool to identify human faces and expressions actively. We use a web camera, a lightweight 3D face model, and use the 2D facial landmark to fit expression coefficients to drive the 3D model. With this Model, it is possible to represent our faces with an Avatar and fully control its bones with rotation and translation parameters. Therefore, in order to reconstruct facial expressions during online meetings, we proposed the above methods as our solution to solve the main issue.

  • PDF