• Title/Summary/Keyword: Video-conference

Search Result 2,926, Processing Time 0.286 seconds

Audio and Image based Emotion Recognition Framework on Real-time Video Streaming (실시간 동영상 스트리밍 환경에서 오디오 및 영상기반 감정인식 프레임워크)

  • Bang, Jaehun;Lim, Ho Jun;Lee, Sungyoung
    • Annual Conference of KIPS
    • /
    • 2017.04a
    • /
    • pp.1108-1111
    • /
    • 2017
  • 최근 감정인식 기술은 다양한 IoT 센서 디바이스의 등장으로 단일 소스기반의 감정인식 기술 연구에서 멀티모달 센서기반 감정인식 연구로 변화하고 있으며, 특히 오디오와 영상을 이용한 감정인식 기술의 연구가 활발하게 진행되는 있다. 기존의 오디오 및 영상기반 감정신 연구는 두 개의 센서 테이터를 동시에 입력 저장한 오픈 데이터베이스를 활용하여 다른 이벤트 처리 없이 각각의 데이터에서 특징을 추출하고 하나의 분류기를 통해 감정을 인식한다. 이러한 기법은 사람이 말하지 않는 구간, 얼굴이 보이지 않는 구간의 이벤트 정보처리에 대한 대처가 떨어지고 두 개의 정보를 종합하여 하나의 감정도 도출하는 디시전 레벨의 퓨저닝 연구가 부족하다. 본 논문에서는 이러한 문제를 해결하기 위해 오디오 및 영상에 내포되어 있는 이벤트 정보를 추출하고 오디오 및 영상 기반의 분리된 인지모듈을 통해 감정들을 인식하며, 도출된 감정들을 시간단위로 통합하여 디시전 퓨전하는 실시간 오디오 및 영상기반의 감정인식 프레임워크를 제안한다.

Video Big Data Processing Scheme for Spatio-Temporal Analysis of Moving Objects (움직이는 물체의 시공간 분석을 위한 동영상 빅 데이터 처리 방안)

  • Jung, Seungwon;Kim, Yongsung;Jung, Sangwon;Kim, Yoonki;Hwang, Eenjun
    • Annual Conference of KIPS
    • /
    • 2017.04a
    • /
    • pp.833-836
    • /
    • 2017
  • 최근 블랙박스 및 CCTV 같은 영상 촬영 장치가 보편화되면서, 방대한 양의 영상 데이터가 실시간으로 생성되고 있다. 만약 이 대용량 데이터 안의 차량 정보를 추출할 수 있다면 범죄 차량 추적, 교통 혼잡도 측정 등의 활용이 가능할 것이다. 이를 구현하기 위해서는 수많은 자동차에서 실시간으로 생성되는 영상 데이터를 처리할 수 있는 시스템이 필수적이나, 이러한 시스템을 찾기 힘든 것이 현실이다. 이를 위해 이 논문에서는 아파치 카프카, Hbase를 이용한 영상 빅데이터 처리 시스템을 제안한다. 아파치 카프카는 시스템 내에서 영상 손실이 없는 전송과 영상 처리 노드의 스케줄링을 수행하며, Hbase는 처리된 데이터를 테이블로 저장하고 사용자가 보낸 쿼리를 처리한다. 더불어, Hbase에 인덱스를 구성하여 빠른 쿼리 처리가 가능하도록 만든다. 실험 결과, 제안된 시스템은 인덱스가 없을 때보다 뛰어난 쿼리 처리 성능을 보이는 것을 확인할 수 있었다.

Design and implementation of real­time video transmission using several web cameras (다수의 웹 카메라를 이용한 실시간 화상 전송 서버의 설계와 구현)

  • Chung, Koo-Hi;Shin, Won;Kim, Tae-Wan;Chang, Chun-Hyon
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2003.10c
    • /
    • pp.250-252
    • /
    • 2003
  • 휴대폰, PDA 등의 대중화에 따라 원격에서 영상을 통해 대상의 상태를 확인하고자 하는 욕구가 증가하였고, 웹 카메라의 보급에 의한 영상 멀티미디어 기술의 대중화는 소프트웨어적인 영상 처리가 가능한 홈 원격화상 감시 솔루션의 개발을 가능하게 하였다. 기존의 화상 전송 시스템은 설치되어 있는 모든 카메라의 동화상을 처리하여 전송함으로써 시스템의 자원을 소모하였고, 모바일 기기에서의 화상 재생에 대한 고려가 되어있지 않았으며, 카메라 수의 확장이 어려웠다. 본 논문에서는 이에 따른 해결 방안으로 클라이언트에서의 동화상 재생에 필요한 웹 카메라를 선택하여 동화상의 처리 및 전송을 함으로써 시스템의 자원 소모를 줄일 수 있고, 모바일 기기에서의 동화상 재생에 최적화된 화질의 화상을 전송할 수 있으며, 버퍼 사용의 최소화로 실시간 전송 및 재생이 가능한 실시간 화상 전송 서버를 설계 및 구현하였다. 구현된 시스템은 가정. 학교와 같은 특정 장소의 영상 감시와 산업용 기기인 통합 전력 감시 시스템. 분산 제어 시스템 등에 적용할 수 있다.

  • PDF

The Effects of Rehabilitation Exercise Using a Home Video Game (PS2) on gait Ability of Chronic Stroke Patients (가정용 게임기를 이용한 재활운동이 뇌졸중 장애인의 보행 능력에 미치는 효과)

  • Shin, Won-Seob;Lee, Seong-Won;Lee, Dong-Yeop
    • Proceedings of the KAIS Fall Conference
    • /
    • 2009.12a
    • /
    • pp.487-490
    • /
    • 2009
  • 본 연구는 가정용 게임기를 이용한 재활 운동을 적용하여 뇌졸중 장애인의 보행능력에 효과가 있는 가를 알아보고자 하였다. 뇌졸중으로 6개월 이상 장애를 가진 32명이 연구에 참여하였고 게임운동군 16명과 대조군 16명으로 나누었다. 게임운동군은 가정용 게임기(PS2, sony)를 이용하여 1시간씩 주 3회, 6주간 실시하였다. 대조군은 운동의 적용 없이 평상시 생활을 유지하도록 하였다. 운동 전과 후에 보행능력을 측정하여 효과를 비교하였다. 통계처리 방법으로 전 후 차이를 검증하기 위하여 대응표본 t 검정을 실시하였고 대조군과의 차이 검증을 위하여 독립표본 t 검정을 실시하였다. 모든 통계적 유의 수준은 0.05로 하였다. 본 연구의 결과 보행능력에서 10m 보행속도가 유의하게 증가하였고(p<.05), 6분 보행거리도 유의하게 증가하였다(p<.05). 결론적으로 가정용 게임기를 이용한 재활운동이 뇌졸중 장애인의 보행능력에 효과가 있는 것으로 나타났다. 향후 뇌졸중 장애인에게 흥미를 유발하고 기능회복의 효과를 가진 게임형태의 재활운동이 다양하게 개발되어 적용하는 연구가 필요하다고 생각한다.

  • PDF

H.264/AVC Video coding rate Control Algorithm Using linear statistical characteristic for Intra frame (선형적 통계특성을 이용한 H.264/AVC 인트라 프레임의 비트율 제어 알고리즘)

  • Joo, Won-Hee;Kim, Myoung-Jin;Hong, Min-Cheol
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2009.11a
    • /
    • pp.255-258
    • /
    • 2009
  • 제한된 채널을 통하여 영상을 전송하고자 할 때 한정된 비트량 에서 최적의 화질을 얻기 위한 비트 할당기법은 영상의 부호화 과정에서 중요한 역할을 하며 중요한 연구 과제이다. H.264/AVC 표준안의 비트율 제어 방식은 영상의 복잡도에 따라 최적의 비트를 할당하는 방식을 사용하지만 첫 번째 프레임인 인트라 프레임에 대한 QP 값을 정확히 예측하지 못하는 문제점을 보인다. 비트율 제어에 있어 인트라 프레임의 복잡도를 예측하여 인트라 프레임에 대하여 할당되는 비트량은 인트라 프레임 이후 영상들의 화질에 큰 영향을 미치게 되므로 인트라 프레임의 복잡도를 예측하여 적절한 QP를 결정 하는 것은 매우 중요하다. 본 논문에서는 실시간 H.264/AVC를 위하여 인트라 모드의 적응적 비트율 제어 기법에 대해 제안한다. 통계적 실험을 통한 인트라 프레임과 인터 프레임과의 선형적 특성을 이용하여 인트라 프레임과 인터 프레임 간의 관계식을 도출한다. 이 관계식을 통하여 인터 프레임 이후에 일어나는 인트라 프레임의 QP 값을 정확하게 예측하는 비트율 제어 알고리즘을 제안한다.

  • PDF

Off-line Visual Feedback Control of Robot Manipulator (로봇 매니퓰레이터의 오프라인 영상피드백 제어)

  • 신행봉;정동연;이종두;이강두;한성현
    • Proceedings of the Korean Society of Machine Tool Engineers Conference
    • /
    • 2001.10a
    • /
    • pp.140-145
    • /
    • 2001
  • The equipment of industrial robot in manufacturing and assembly lines has rapidly increased. In order to achieve high productivity and flexibility, it becomes very important to develop the visual feedback control system with Off-Line Programming System(OLPS). We can save much efforts and time in adjusting robots to newly defined workcells by using Off-Line Programming System. A proposed visual calibration scheme is based on position-based visual feedback. The visual calibration system is composed of a personal computer, an image processing board, a video monitor, and one camera. The calibration program firstly generates predicted images of objects in an assumed end-effector position. The process to generate predicted images consists of projection to screen-coordinates, visible range test, and construction of simple silhouette figures. Then, camera images acquired are compared with predicted ones for updating position and orientation data. Computation of error is very simple because the scheme is based on perspective projection, which can be also expanded to experimental results. Computation time can be extremely reduced because the proposed method does not require the precise calculation of tree-dimensional object data and image Jacobian.

  • PDF

Reduced Inter-view PSNR variance Rate-control Algorithm for Multi-View Video coding (다시점 비디오 영상 부호화기를 위한 시점 간 PSNR 분산 감소 비트율 제어 알고리즘)

  • Ryu, Seung-Chul;Seo, Jung-Dong;Liu, Xingang;Yan, Zheng;Sohn, Kwang-Hoon
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2010.07a
    • /
    • pp.134-137
    • /
    • 2010
  • 다시점 영상 비디오를 부호화하기 위해 다시점 영상 부호화기(MVC)가 제안되었다. MVC가 다시점 영상 비디오를 효율적으로 압축함에도 불구하고 여전히 제한된 대역폭의 채널을 통해 다시점 영상을 전송하기에는 한계가 있다. 따라서 제한된 대역폭을 효과적으로 활용할 수 있도록 효율적인 비트율 제어 알고리즘이 요구된다. 2D 영상 부호화를 위한 비트율 제어 알고리즘은 활발한 연구가 이루어졌지만 다시점 영상 부호화를 위한 비트율 제어 알고리즘은 아직 충분히 연구되어지지 않았다. 본 논문에서는 시점 간 화질 분산과 계층적 B 픽처 구조를 고려한, 다시점 영상 부호화를 위한 비트율 제어 알고리즘을 제안한다. 제안된 알고리즘은 부호화 전 단계, 시점 레벨 비트율 제어, GOP 레벨 비트율 제어, 픽처 레벨 비트율 제어의 네 단계로 이루어진다. 부호화 전 단계에서 시점 간 비트율의 비중과 계층 레벨 간의 비중을 계산한다. 그리고 시점의 목표 비트율, GOP의 목표 비트율, 픽처의 목표 비트율이 각각 시점 레벨 비트율 제어단계, GOP 레벨 비트율 제어단계, 픽처 레벨 비트율 제어 단계에서 계산된다. 실험 결과는 제안된 방식이 시점 간 화질(PSNR)의 분산을 줄이면서 비트율을 제어하는데 효과적이라는 것을 보여준다.

  • PDF

Conditional ARQ-based Error Control Scheme for Video Transport over IP Networks (IP 망을 통한 비디오 전송에 효율적인 조건적 ARQ 기반의 오류 제어 기법)

  • Shim, Sang-Woo;Seo, Kwang-Deok;Jung, Soon-Heung;Bae, Seong-Jun
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2010.07a
    • /
    • pp.126-129
    • /
    • 2010
  • 본 논문에서는 패킷 오류가 발생하는 IP 망을 통해 비디오 전송 서비스를 제공하기 위한 조건적 ARQ 기반의 오류 제어기법을 제안한다. IP 망에서 패킷 손실이 발생하면 수신 단말은 서버에게 손실된 패킷의 재전송을 요청할 수 있다. 그러나 망 상황과 접속 단말 개수를 고려하지 않고 무조건적인 재전송을 요청 할 경우 손실된 패킷이 복호화에 필요한 시점까지 도착 할 것인지가 보장되지 않을 뿐더러, 오히려 불필요한 재전송 요청에 의해 망에서의 트래픽 량을 가중시킬 수 있다. 따라서 망 상황을 고려하여 손실된 패킷이 재전송에 의해 적절한 시간 내에 도착이 가능한지를 판단하여 조건적으로 ARQ를 요청하는 기술이 요구된다. 본 논문에서는 기존의 RFC 문서에서 권고하는 재전송 관련 메카니즘들을 효과적으로 활용하여 표준기술 기반의 조건적 ARQ 오류제어 기법을 제안한다. 제안된 기법에서는 단말에서 추정된 망 상황을 기반으로 조건적으로 재전송 요청 여부를 결정하고, 더 나아가서 유효한 재전송 요청 시점을 결정하여 보다 효율적인 ARQ 가 적용될 수 있도록 한다. 제안된 조건적 ARQ 기반의 오류 제어 기법의 성능을 검증하기 위하여 패킷 손실 네트워크 환경을 NIST-Net을 활용하여 구축하며 실험 결과를 통해 제안된 기법의 우수한 오류 강인 성능을 확인한다.

  • PDF

View Synthesis for Inter-view Prediction of 3D Video Coding (시점 생성 기법을 이용한 3차원 비디오 부호화의 시점 간 예측 기술)

  • Kim, Dong-Hyun;Seo, Jung-Dong;Ham, Bum-Seop;Choi, Jin-Wook;Sohn, Kwang-Hoon
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2010.07a
    • /
    • pp.130-133
    • /
    • 2010
  • 멀티미디어 신호 처리 분야의 급속한 발전으로 인해 3차원 TV(3DTV)는 차세대 방송 시스템 시장에서 가장 주목을 받는 제품이 되었다. 3DTV는 사용자에게 입체감을 제공하여 사용자가 마치 그곳에 있는 듯한 효과를 줄 수 있다. 이에 최근 다시점 컬러 영상과 그에 대응되는 깊이 영상을 이용하여 다양한 위치에서의 입체 영상을 제공하는 기술이 활발히 진행되고 있다. 본 논문에서는 주어지는 다시점 컬러 영상과 깊이 영상의 정보를 동시에 이용하여 다시점 영상 부호화의 효율을 높이는데 그 목적이 있다. 이를 위해 시점 생성 기법을 통해 다시점 영상의 부호화 시 참조하는 주변 시점의 영상들로부터 계산되는 변이 벡터 정보를 줄이는 방법을 제안한다. 실험 결과, 기존의 다시점 비디오 부호화에 비해서 약 0.5~1.5 dB정도의 화질 개선이 이뤄졌고, 평균 17.5%의 비트율 감소를 보였다.

  • PDF

Design and Implementation of Real-Time Video Transport System using Variable Size Random Linear Coding (가변 크기 Random Linear Coding 기반의 실시간 무선 비디오 전송 시스템의 실험적인 설계 및 구현)

  • Kim, Jong-Ryool;Park, Joon-Sang;Kim, Jong-Won
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2009.11a
    • /
    • pp.187-190
    • /
    • 2009
  • 네트워크 코딩 중 RLC (random linear coding)은 다양한 연구들에서 이미 그 효용성이 입증되었으며 실제 유/무선 네트워크 환경에서 RLC를 적용하는 연구들이 최근 활발하게 진행되고 있다. RLC는 간단한 방법론적인 특성과 그 효용성으로 인해 많은 관심을 받고 있지만, 실제 환경에서 RLC 디코딩 과정이 요구하는 높은 성능 복잡도로 인하여 실용성에 한계를 가진다. 이러한 상황에서 최근 병행 방법 (Parallelized method)을 이용해 RLC 디코딩 과정의 복잡도를 개선하고 이를 실제적인 비디오 전송에 적용하는 연구들이 진행되고 있다. 본 논문에서는 이러한 연구들과 더불어 무선 환경에서의 실시간 비디오 전송을 위한 비디오의 특성을 고려하는 RLC 기반의 실시간 비디오 전송 시스템을 제안한다. 또한 제안한 시스템 실험적으로 구현하고, 이를 실제 무선 네트워크 환경에서 검증하였다.

  • PDF