• 제목/요약/키워드: 3차원 마스크 제안

검색결과 32건 처리시간 0.019초

효율적인 개방형 어휘 3차원 개체 분할을 위한 클래스-독립적인 3차원 마스크 제안과 2차원-3차원 시각적 특징 앙상블 (Class-Agnostic 3D Mask Proposal and 2D-3D Visual Feature Ensemble for Efficient Open-Vocabulary 3D Instance Segmentation)

  • 송성호;박경민;김인철
    • 정보처리학회 논문지
    • /
    • 제13권7호
    • /
    • pp.335-347
    • /
    • 2024
  • 개방형 어휘 3차원 포인트 클라우드 개체 분할은 3차원 장면 포인트 클라우드를 훈련단계에서 등장하였던 기본 클래스의 개체들뿐만 아니라 새로운 신규 클래스의 개체들로도 분할해야 하는 어려운 시각적 작업이다. 본 논문에서는 중요한 모델 설계 이슈별 기존 모델들의 한계점들을 극복하기 위해, 새로운 개방형 어휘 3차원 개체 분할 모델인 Open3DME를 제안한다. 첫째, 제안 모델은 클래스-독립적인 3차원 마스크의 품질을 향상시키기 위해, 새로운 트랜스포머 기반 3차원 포인트 클라우드 개체 분할 모델인 T3DIS[6]를 마스크 제안 모듈로 채용한다. 둘째, 제안 모델은 각 포인트 세그먼트별로 텍스트와 의미적으로 정렬된 시각적 특징을 얻기 위해, 사전 학습된 OpenScene 인코더와 CLIP 인코더를 적용하여 포인트 클라우드와 멀티-뷰 RGB 영상들로부터 각각 3차원 및 2차원 특징들을 추출한다. 마지막으로, 제안 모델은 개방형 어휘 레이블 할당 과정동안 각 포인트 클라우드 세그먼트별로 추출한 2차원 시각적 특징과 3차원 시각적 특징을 상호 보완적으로 함께 이용하기 위해, 특징 앙상블 기법을 적용한다. 본 논문에서는 ScanNet-V2 벤치마크 데이터 집합을 이용한 다양한 정량적, 정성적 실험들을 통해, 제안 모델의 성능 우수성을 입증한다.

MR영상의 3차원 가시화 및 분석을 위한 뇌영역의 자동 분할 (Automatic Brain Segmentation for 3D Visualization and Analysis of MR Image Sets)

  • 김태우
    • 한국정보처리학회논문지
    • /
    • 제7권2호
    • /
    • pp.542-551
    • /
    • 2000
  • 본 논문에서는 MR 영상의 3차원 가시화 및 분석을 위한 단일 채널 MR 영상의 자동 뇌영역 분할 방법을 제안한다. 이 방법은 4단계의 2차원 및 3차원 처리에 의하여 뇌윤곽을 찾아낸다. 1,2단계에서는 곡선 적합을 이용한 자동 문턱치화에 의하여 머리마스크와 초기 뇌마스크를 생성한다. 3단계에서 입방보간으로 초기 뇌마스크의 3차원 볼륨을 생성하여 형태학적 연산, 연결부위 레이블링에 의하여 중기 뇌마스크를 생성한다. 최종적으로 곡선 적합에 의한 자동 문턱치화를 이용하여 뇌마스크를 정련한다. 제안한 알고리즘은 영상의 슬라이스 방향을 고려할 필요가 없고 영상이 뇌 전체를 포함하지 않아도 되며, T1, T2, PD, SPGR등 다양한 종류의 MR 영상의 자동적인 뇌영역의 분할에 유용하다. 실험에서 20세트 MR 영상에 대하여 수동분할을 기준으로 0.97 이상의 유지도를 보였다.

  • PDF

경로 재설정을 통한 3차원 시상 두뇌 자기공명영상 분할 (Automated Segmentation of 3-D Sagittal Brain MR Images Through Boundery Comparison)

  • 허신;손광훈;최윤식;강문기;이철희
    • 대한의용생체공학회:의공학회지
    • /
    • 제21권2호
    • /
    • pp.145-156
    • /
    • 2000
  • 본 논문에서는 중앙시상 두뇌 자기공명영상 분할결과를 이용한 3차원 시상 두뇌 자기공명영상의 자동분할기법을 제안한다. 제안된 알고리즘에서는 먼저 3차원 시상 두뇌 자기공명영상의 중앙영상을 분할하고, 분할된 중앙두뇌 자기공명영상을 인접하는 영상에 마스크로 적용한다. 이 때 마스크 적용으로 인하여 인접하는 영상이 절단되는 문제가 발생할 수 있다. 이러한 문제를 해결하기 위하여 절단 영역의 경계점을 검출한 후, 절단 영역에 대한 경로 재설정을 통해 절단 영역을 복원한다. 이러한 경로 재설정을 위해 connectivity-based threshold segmentation algorithm을 사용하였다. 실험결과 제안된 알고리즘의 유용성을 확인할 수 있었다.

  • PDF

대용량 소포영상에서 관심영역 고속추출 방법에 관한 연구 (The High-Speed Extraction of Interest Region in the Parcel Image of Large Size)

  • 박문성;박상은;김인수;김혜규;정회경
    • 정보처리학회논문지D
    • /
    • 제11D권3호
    • /
    • pp.691-702
    • /
    • 2004
  • 본 문은 고속으로 이송되는 컨베이어 벨트 환경에서 획득된 대용량 소포 영상에서 다양한 관심영역(ROI:Region of Interest)을 고속 추출할 수 있는 방법을 제안한다. 제안된 방법의 친 번째 단계에서는 영상을 32${\times}$32 픽셀 크기의 마스크로 나누고 그 중 내부 픽셀의 최대값과 최소값의 차이값이 최저 동적 입계값보다 큰 경우에 1차 후보로 검출한다. 두 번째 단계에서는 1차 후보 마스크를 다시 8${\times}$8크기의 서브마스크로 나누고 적셀 값의 편차(deviation)을 기준으로 최저 임계값보다 큰 마스크만 남김으로서 불필요한 영역을 제거한다. 이러한 전처리 과정을 거쳐 1차원 바코드, 2차원 바코드, 소포의 외형 경계, 레이블 및 문자와 같은 소포의 정보가 기록되어 있는 영역(ROI)을 제외한 나머지 영역을 제거한다. 후처리 과정에서는 위의 ROI 중 2차원 바코드 영역만을 추출하기 위해서 각각의 ROI에 대하여 기준축을 생성한 결과를 이용하여 각각의 영역을 검증하였다. 이와 같은 방법으로 실험한 결과 대용량 소포영상에서 약 200msec 이내에 다양한 ROI를 추출하였으며 100%의 정확도로 2차원 바코드 영역을 지정할 수 있음을 확인하였다.

스테레오 비젼 시스템에서 3차원정보와 광 상관기를 이용한 3차원 물체추적 방법 (3-D Object Tracking using 3-D Information and Optical Correlator in the Stereo Vision System)

  • 서춘원;이승현;김은수
    • 방송공학회논문지
    • /
    • 제7권3호
    • /
    • pp.248-261
    • /
    • 2002
  • 본 논문에서는 스테레오 비젼 시스템의 3차원 정보에 의해 가변되는 윈도우 마스크와 광 BPEJTC(binary phase extraction joint transform correlator)를 이용하여 스테레오 카메라를 제어하는 새로운 3차원 물체추적 시스템을 제안하였다. 즉, 스테레오 비젼 시스템의 구성 요소에 의해 3차원 정보인 추적 물체까지의 거리 정보를 쉽게 구할 수 있고, 이 거리 정보로 윈도우 마스크를 가변 시켜 추적물체 영역을 추출할 수 있다. 이 추적물체 영역은 다음 기준영상으로 갱신하여 사용된다. 그리고 이 기준영상과 스테레오 입력 영상간에 광 BPEJTC를 실행하여 추적 물체의 위치 값을 구하고. 이 값으로 스테레오 카메라의 주시각과 팬/틸트를 제어하여 3차원 물체추적이 이루어진다. 실험 결과 제안한 알고리즘은 스테레오 입력 영상에서 배경잡음과 관계없이 추적 물체영역을 추출하여 3차원 물체추적이 가능하고, 이의 구현으로 3차원 원격작업 시스템이나 적응적인 3차원 물체 추적기 등의 구현 가능성을 제시하였다.

3차원 얼굴 형상의 정규화를 위한 특징 추출 (Feature Extraction for the Normalization of a 3D Human Face)

  • 김익동;심재창
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2003년도 봄 학술발표논문집 Vol.30 No.1 (B)
    • /
    • pp.310-312
    • /
    • 2003
  • 본 논문은 3차원 얼굴 형상을 이용한 얼굴 인식에 있어서, 정규화 과정에 사용될 얼굴의 특징 영역을 추출하는 방법을 제안한다. 3차원 얼굴 형상은 조명의 변화에 상관없이 얼굴의 특징 분석이 가능하고, 이를 이용한 얼굴 인식이 가능하다. 그러나, 입력된 형상에 따라 회전, 기울어진 정도, 그리고 좌우로 움직인 정도가 다르다 이런 특성을 고려하지 않고 추출된 특징들은 잘못된 인식 결과를 초래할 수 있다. 이런 이유로 입력시의 오류 돌을 바로잡는 정규화 과정이 필요하다. 정규화 과정에서는 얼굴의 기하학적인 특징(눈, 코, 입 등)을 이용하는 것이 일반적이다. 이들 중, 코는 3차원 얼굴 형상에서 두드러진 특징이 될 수 있다. 본 연구에서는 코의 실제 형상과 유사한 코 형상 추출 마스크를 사용하여 입력된 형상으로부터 코 영역을 추출하는 방법을 제안한다.

  • PDF

두 변화검출 마스크를 이용한 3차원 영상분할 초저속 동영상 부호화 (Very Low Rate Coding of Motion Video Using 3-D Segmentation with Two Change Detection Masks)

  • 이상미;김남철;손현
    • 대한전자공학회논문지
    • /
    • 제27권10호
    • /
    • pp.146-153
    • /
    • 1990
  • 아주 높은 압축률에서도 시각적으로 만족할 만한 동영상을 전송할 수 있는 3차원 영상 분할기반 부호화법을 제안하였다. 두개의 변화검출 마스크를 이용하여 동영상에서 의미있는 움직임 영역만을 효과적으로 추출하고 또한, 차영상을 분할하는 대신 현재 프레임을 직접 분할함으로써 높은 압축률에서도 우수한 품질의 영상을 얻을 수 있다. 실험을 통해, 제안된 방법은 Miss America의 연속영상을 360배 정도의 압축률로 전송하였을 경우에도 재생영상의 품질이 우수함을 확인하였다.

  • PDF

코 형상 마스크를 이용한 3차원 얼굴 영상의 특징 추출 (Facial Feature Extraction using Nasal Masks from 3D Face Image)

  • 김익동;심재창
    • 대한전자공학회논문지SP
    • /
    • 제41권4호
    • /
    • pp.1-7
    • /
    • 2004
  • 본 논문은 3차원 얼굴 영상을 이용한 얼굴 인식에 있어서, 정규화 과정에 사용될 얼굴의 특징 영역을 추출하는 방법을 제안한다. 3차원 얼굴 영상은 조명의 변화에 상관없이 얼굴의 특징 분석이 가능하고, 이를 이용한 얼굴 인식이 가능하다. 그러나 입력된 형상의 자세에 따라 회전, 기울어진 정도, 그리고 좌우로 움직인 정도가 다르다. 이런 특성을 고려하지 않고 추출된 특징들은 잘못된 인식 결과를 초래할 수 있다. 이런 이유로 입력에서의 오류들을 바로잡는 정규화 과정이 필요하다. 정규화 과정에서는 얼굴의 기하학적인 특징인 눈, 코, 입 등을 이용하는 것이 일반적이다. 이들 중, 코는 3차원 얼굴 영상에서 두드러진 특징이 될 수 있다. 본 연구에서는 코의 실제 형상과 유사한 긴 추출 마스크를 사용하여 입력된 영상으로부터 코를 추출하는 방법을 제안한다.

머리 MR영상에서 자동화된 뇌영역 추출 (Automated Brain Region Extraction Method in Head MR Image Sets)

  • Cho, Dong-Uk;Kim, Tae-Woo;Shin, Seung-Soo
    • 한국콘텐츠학회논문지
    • /
    • 제2권3호
    • /
    • pp.1-15
    • /
    • 2002
  • 본 논문은 인간 뇌의 가시화 및 해석을 위하여 단일 채널 MR영상에서 자동화된 뇌영역 추출 방법을 제안한다. 이 방법은 쌍곡선 적합을 이용한 자동 문턱치화와 3차원 형태 학적 연산에 의하여 뇌 마스크 볼륨을 생성한다. 쌍곡선 적합은 MR영상의 히스토그램에 곡선을 적합할 때 오차를 줄일 수 있으며, 침식, 연결부위 레이블링, 최대특징 연산, 팽창 등 3차원 형태학적 연산은 문턱치화된 뇌 마스크로부터 생성된 정육각형 볼륨 마스크에 적용된다. 제안한 방법은 SPGR, T1, T2, PD MR영상 세트에서 뇌영역을 자동 추출할 수 있으며, 가장자리 슬라이스에도 적용 가능하고, 영상이 뇌 전체를 포함하지 않아도 된다. 실험에서 20 세트의 MR영상에 적용하여 수동 방법과 비교하여 0.97 이상의 유사도를 보였다.

  • PDF

3차원 영상의 자동 소실점 검출을 위한 분할 영상 좌표계 (Split Image Coordinate for Automatic Vanishing Point Detection in 3D images)

  • 이정화;김종화;서경석;최흥문
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2003년도 하계종합학술대회 논문집 Ⅳ
    • /
    • pp.1891-1894
    • /
    • 2003
  • 본 논문에서는 분할 영상 좌보계 (split image coordinate: SIC)를 제안하여 3차원 영상의 주요 특징 중의 하나인 유, 무한 소실점을 그 위치의 무한성이나 카메라의 보정과 관계없이 정확하게 자동 추출하였다. 제안한 방법에서는 가우시안 구 (Gaussian sphere) 기반의 기존 방법들과는 달리 영상 공간을 누적 공간으로 활용함으로써 카메라 보정이나 영상의 사전정보가 없어도 원 영상의 정보 손실 없이 소실점을 추출할 수 있고, 영상을 무한대까지 확장한 후 분할하여 재정의 함으로써 유, 무한 소실점을 모두 추출할 수 있도록 하였다. 정확한 소실점의 검출을 위하여 직선 검출 과정에서는 방향성 마스크 (mask)를 사용하였으며, 직선들의 군집화 (clustering) 과정에서는 기울기 히스토그램 방법과 수평/수직 군집화 방법을 적응적으로 적용하였다. 제안한 방법을 합성 영상 및 건축물 (man-made environment) 영상에 적용시켜 유, 무한 소실점들을 효과적이고 정확하게 찾을 수 있음을 확인하였다.

  • PDF