• 제목/요약/키워드: 비디오 데이터 보강

검색결과 6건 처리시간 0.022초

비디오 데이터 보강을 이용한 인물 개체 분할 (Human Instance Segmentation using Video Data Augmentation)

  • 전현진;김인철
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2022년도 추계학술발표대회
    • /
    • pp.532-534
    • /
    • 2022
  • 본 논문에서는 미생 드라마 비디오들을 토대로 구축한 비디오 인물 개체 분할 데이터 집합인 MHIS를 소개하고, 등장인물 클래스 간의 심각한 데이터 불균형 문제를 효과적으로 해결하기 위한 새로운 비디오 데이터 보강 기법인 CDVA를 제안한다. 기존의 비디오 데이터 보강 기법들과는 달리, 새로운 CDVA 보강 기법은 비디오의 시공간적 맥락을 충분히 고려해서 부족한 인물 클래스의 훈련 비디오 데이터들을 추가 생성함으로써, 비디오 개체 분할 신경망 모델의 성능을 효과적으로 개선시킬 수 있다. 본 논문에서는 정량 및 정성 실험들을 통해, 제안 비디오 데이터 보강 기법의 우수성을 입증한다.

인물 개체 분할을 위한 맥락-의존적 비디오 데이터 보강 (Context-Dependent Video Data Augmentation for Human Instance Segmentation)

  • 전현진;이종훈;김인철
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제12권5호
    • /
    • pp.217-228
    • /
    • 2023
  • 비디오 개체 분할은 비디오를 구성하는 영상 프레임 각각에 대해 관심 개체 분할을 수행해야 할 뿐만 아니라, 해당 비디오를 구성하는 프레임 시퀀스 전체에 걸쳐 개체들에 대한 정확한 트래킹을 요구하기 때문에 난이도가 높은 기술이다. 특히 드라마 비디오에서 인물 개체 분할은 다양한 장소와 시간대에서 상호 작용하는 복수의 주요 등장인물들에 대한 정확한 트래킹을 요구하는 특징을 가지고 있다. 또한, 드라마 비디오 인물 개체분할은 주연 인물들과 조연 혹은 보조 출연 인물들 간의 등장 빈도에 상당한 차이가 있어 일종의 클래스 불균형 문제도 있다. 본 논문에서는 미생 드라마 비디오들을 토대로 구축한 인물 개체 분할 데이터 집합인 MHIS를 소개하고, 등장인물 클래스 간의 심각한 데이터 불균형 문제를 효과적으로 해결하기 위한 새로운 비디오 데이터 보강 기법인 CDVA를 제안한다. 기존의 비디오 데이터 보강 기법들과는 달리, 새로운 CDVA 보강 기법은 비디오들의 시-공간적 맥락을 충분히 고려해서 목표 인물이 삽입되어야 할 배경 클립 내의 위치를 결정함으로써, 보다 더 현실적인 보강 비디오들을 생성한다. 따라서 본 논문에서 제안하는 새로운 비디오 데이터 보강 기법인 CDVA는 비디오 개체 분할을 위한 심층 신경망 모델의 성능을 효과적으로 향상시킬 수 있다. 본 논문에서는 MHIS 데이터 집합을 이용한 다양한 정량 및 정성 실험들을 통해, 제안 비디오 데이터 보강 기법의 유용성과 효과를 입증한다.

생방송 비디오 스트림 전송을 위한 프록시 서버의 설계와 구현 (A Design and Implementation of Proxy Server for Live-Video Stream Transmission)

  • 김현민;낭종호
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2002년도 봄 학술발표논문집 Vol.29 No.1 (B)
    • /
    • pp.529-531
    • /
    • 2002
  • 생방송 비디오 프록시는 사용자에게 최신의 비디오 데이터를 전송해야 한다. 그러나 큰 파일을 나누어 미리 캐싱하는 기존의 방법으로는 최신의 데이터를 보여줘야 하는 생방송 VOD의 제약을 만족시킬 수 없다. 본 논문에서는 생방송 비디오 스트림을 대상으로 효과적으로 캐싱할 수 있도록 클라이언트의 요청을 받는 큐와, 생방송 비디오 데이터를 저장하는 버퍼풀을 구성하였고, 이들이 제대로 동작하기 위한 동기화 과정을 설계하였다. 이 구조의 특징은 프록시가 클라이언트들의 요청을 일정시간 동안 모아서, 미디어 서버에게 한번만 요청한다는 데에 있다 미디어 서버는 프록시에게만 요청을 받고 데이터를 전달하게 되며, 모든 부하는 프록시 쪽으로 옮겨간다 결국 프록시 서버의 개수를 늘리거나 성능을 확장하면 서비스 가능한 클라이언트의 수를 확장시진 수 있는, 이른바 확장성의 개선을 기대할 수 있다. 실제로 구현해본 절과 지연시간 개선, 확장성 효과 등 프록시로서 만족할 만한 성능이 나옴을 확인하였다. 비연속적인 비디오 데이터를 대상으로 한 본 논문은, 오디오와 같이 연속적인 성질의 데이터에 대한 처리를 보강한다면 수요가 늘고있는 생방송 VOD서비스에 대비한 프록시 개발에 도움을 줄 것이다.

  • PDF

시공간 정보를 이용한 자막 탐지 및 향상 기법 (A Method for Text Detection and Enhancement using Spatio-Temporal Information)

  • 정종면
    • 한국컴퓨터정보학회논문지
    • /
    • 제14권8호
    • /
    • pp.43-50
    • /
    • 2009
  • 디지털 비디오에서 텍스트 정보는 비디오 데이터의 시청각적인 정보를 보강하고 부가 정보를 제공하기 때문에 방대한 멀티미디어의 내용을 예측할 수 있는 중요한 단서를 제공한다. 본 논문에서 제안된 방법은 주어진 영상열로부터 자막의 획 특징을 이용하여 자막을 탐지하고, 프로젝션을 이용하여 자막의 위치를 찾는다. 찾아진 자막을 포함하는 바운딩박스에 대한 기하학적인 검증을 거친 후, 서로 인접하는 프레임에 있는 바운딩박스 중 공간적으로 동일한 위치의 바운딩박스에 대한 MAD를 이용하여 바운딩박스를 추적하고, 시간적 중복성을 이용하여 바운딩박스 영역의 화질을 향상시킨다. 다양한 비디오에 대한 실험 결과는 제안된 방법의 타당성을 보인다.

비디오 영상에서 시공간적 문자영역 제거방법 (Spatiotemporal Removal of Text in Image Sequences)

  • 이창우;강현;정기철;김항준
    • 전자공학회논문지CI
    • /
    • 제41권2호
    • /
    • pp.113-130
    • /
    • 2004
  • 많은 시각적 정보를 포함한 비디오 데이터들의 자동화된 처리 기술 중, 비디오 데이터들의 시청자적인 정보를 보강시키고, 부가적인 정보를 첨가하기 위한 일환으로 자막을 삽입하는 경우가 많다. 이러한 자막은 때로 영상자료의 재사용성(reusability)을 저해하고, 원 영상을 훼손하는 경우가 발생한다. 본 논문에서는 영상의 재사용성을 높이고 원 영상 복원을 위해 Support Vector Machines(SVM)과 시공간적 영상복원 방법(spatiotemporal restoration)을 이용한 비디오 영상에서의 자동 문자 검출과 제거 방법을 제안한다. 연속적인 두 프레임 이상의 영상을 입력받아, 현재 프레임 영상에서 SVM을 이용하여 문자 영역을 검출한 다음, 검출된 문자 영역을 제거하고, 문자 영역에 의해 가려졌던 원 영상을 복원하기 위한 두 단계- 시간적 복원(temporal restoration)과 공간적 복원(spatial restoration)접근방법을 제안한다. 제안된 복원 방법은 글자 모션(text motion) 정보와 두 영상의 배경 차이(background difference)를 이용하여 영상을 그 특징에 따라 분류하고, 각 영상의 특징에 맞는 복원 방법을 적용한다. 제안된 방법은 다양한 종류의 영상에서 문자뿐만 아니라 관심의 대상이 되는 객체의 자동 검출 및 복원 등 다양한 응용분야를 포함한다.

신소재의 피복두께에 따른 제방의 붕괴 거동 분석 (Analysis of breaching behavior of levee according to coating thickness of new substance)

  • 고동우;김성중;강준구
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2018년도 학술발표회
    • /
    • pp.480-480
    • /
    • 2018
  • 전 세계적으로 자연 친화, 하천생태계 보전, 친수하천 등을 조성하기 위한 대대적인 하천 정비사업이 활발히 진행 중에 있다. 최근 홍수로 인한 제방 붕괴에 대응하기 위한 제방의 안정화 및 개선을 위한 방법으로 기존의 시멘트와 같은 혼합물질을 사용하지 않고 환경 친화적이고 지속 가능한 대안에 대한 수요가 증가되고 있는 추세이며 현재 노후화 된 불안정 제방에 대한 보강대책을 수립해나가는 과정으로써 친환경 신소재를 활용하여 제방을 보호하는 연구가 수행되고 있다. 제방사면에 적용되는 신소재는 바이오폴리머를 활용한 재료로써 공동연구기관 카이스트에서 개발된 환경 친화적인 물질로 미생물에 의해 유도된 고인장 및 인체 무해성 등의 특성을 갖고 있으며 경제적 타당성인 측면에서 시멘트와 비교 분석 되어야 하고 실제 현장에서의 적용 가능성, 신뢰성 및 내구성 검토 등 성능을 보장하기 위한 지속적인 연구가 필요한 상황이다. 이에 본 안동하천실험센터에서는 중규모 제방을 직접 제작하여 수리모형실험을 통한 친환경 신소재 활용 제방의 안정성 및 성능 평가를 실시하였다. 수리실험 조건은 카이스트에서 제시된 레시피를 기반으로 먼저 분말형태의 바이이폴리머를 물과 희석하여 만들어진 바이오폴리머 용액을 흙과 혼합한 뒤 제방표면에 직접 미장작업을 수행하여 실험조건에 따라 일정한 두께(1cm, 3cm, 5cm)로 피복하였다. 이후 월류 붕괴 실험이 가능한 3 - 5일 정도의 양생기간을 거쳐 실험을 진행하였다. 실험결과는 다수의 고프로(GoPro) 및 비디오 카메라 등 다양한 영상장치를 이용하여 픽셀기반의 영상분석기법을 활용한 시간 흐름에 따른 제방 사면에서의 붕괴규모를 산정하여 신소재의 피복 두께에 따른 제체의 붕괴 거동 및 안정성을 평가하였으며, 또한 제방 파괴부에서의 흐름 상황 및 유속이 붕괴 발달에 미치는 영향을 분석하기 위하여 PIV 분석을 실시하였다. 이번 연구의 최종목표는 지속적인 예비실험을 수행하여 월류 및 침투, 파이핑 등 파괴 인자 별 신소재의 성능 개선 및 개발된 새로운 공법에 대한 효과 검토를 통한 최적안을 도출함으로써 향후 실규모 실험실증을 통한 신소재 시공 및 공법에 대한 현장적용 가능성 검증을 거쳐 최종적으로 신소재 제방 공법 설계 기술, 신소재 및 공법 표준안, 제방공법 안정성 평가 가이드라인 등을 제시하고자 하며, 이러한 실험데이터를 축적함으로써 실제 제방 붕괴 시 비상대처계획 수립에 필요한 기초자료로 활용이 가능할 것으로 사료된다.

  • PDF