• 한국정보과학회논문지:소프트웨어및응용
• /
• 제31권12호
• /
• pp.1611-1620
• /
• 2004

MPEG-4는 객체의 삽입/삭제/교체 또는 객체의 속성 변경을 통하여 동적인 장면 구성을 지원한다. 기존의 MPEG-4 재생기들은 MPEG-4 표준에 따라 멀티미디어 데이타를 전송하고 재생하는데 치중하여 MPEG-4의 특징인 다양한 객체의 지원이나 동적인 장면 구성의 지원이 미흡했다 본 논문에서는 MPEG-4 재생기의 핵심 구성요소인 효율적인 장면 구성기를 제안한다. 장면 구성기는 장면 그래프를 효율적으로 탐색하고, 자료구조를 생성하여 객체 정보를 그 특성에 맞게 관리하며, 상호작용 처리 능력을 향상시킨 최적의 처리기이다. 장면 구성기는 장면 기술 정보를 충분히 지원하며, 구성요소 확장과 모바일 환경에 적용하기 위해 재생기에서 독립적으로 관리된다.

• 한국정보과학회논문지:컴퓨팅의 실제 및 레터
• /
• 제11권2호
• /
• pp.124-132
• /
• 2005

본 논문에서는 모바일 장치를 위한 MPEG-4 콘텐츠 저작을 위하여 객체 및 장면 트리 변환을 이용한 방법을 제안한다. 제안하는 방법은 저작시 MPEG-4 콘텐츠의 객체와 장면 트리를 변환하여 모바일 장치에서 재생할 수 있도록 콘텐츠를 재구성한다. 이 방법은 모바일 장치의 작은 인터페이스에서 재생을 효율적으로 할 수 있도록 장면에 표현되는 각 객체를 기하 객체로 변환하고 그 외형을 축소하여 초기 로딩 시간을 감소시키며, 원 객체의 재생은 사용자가 재생 장면에서 해당 기하 객체를 선택할 때 재생된다. 그리고 제안한 방법을 기존 저작 도구에 적용하여, 모바일 장치의 재생기에서 효율적으로 MPEG-4 콘텐츠를 재생시킬 수 있음을 보였다.

• 한국정보과학회논문지:컴퓨팅의 실제 및 레터
• /
• 제9권2호
• /
• pp.182-190
• /
• 2003

MPEG-4와 같은 대화형 미디어의 시간 관계를 위하여 재생 중에 사용자 이벤트에 의하여 객체간 재생 시간과 시간 관계를 동적으로 변화시킬 수 있는 시간 모델이 필요하다. 또한 사용자 이벤트에 의하여 시간 속성이 변경되더라도, 씬의 타당성이 유지되어야 한다. 본 논문에서는 사용자 상호작용을 지원하는 시간 모델을 제안하고, 이를 적용한 MPEG-4 컨텐츠 저작 시스템을 개발하였다. MPEG-4에서 저작 가능한 시간 관계와 시간속성을 변경시키는 사용자 상호작용을 정의하였다. 본 저작 시스템은 시간 관계와 이벤트에 대한 제약 조건을 정의하고, 제약 조건을 검사하여 오류 없는 씬(scene)을 생성할 수 있다. 또한 MPEG-4 씬에 시간관계와 이벤트를 시각적으로 저작하기 위한 저작 환경을 제공하고, 저작된 씬을 인코딩 하여 MPEG-4 스트림을 생성한다.

• 한국멀티미디어학회:학술대회논문집
• /
• 한국멀티미디어학회 2001년도 춘계학술발표논문집
• /
• pp.192-195
• /
• 2001

MPEG-4 content is streaming media that are composed of different types of media objects, organized in a hierarchical fashion. This paper proposes scene composition model for authoring MPEG-4 contents which can support object based interactions. And we have developed MPEG-4 contents authoring tool applied the proposed scene composition model as intermediate data structure. Particularly, for supporting interoperability between multimedia contents, the scene composition model should be used independent of file format. So visual scene composed of media objects on the from of scene composition tree can be transformed variable data format including BIFS, scene description from proposed by MPEG-4 standard and also support the extension of capability.

• 한국산업정보학회논문지
• /
• 제12권1호
• /
• pp.54-60
• /
• 2007

The Digital Multimedia Broadcasting(DMB) system is developed to offer high quality multimedia content to the mobile environment. The system adopts the MPEG-4 standard for the main video, audio and other media format. For providing interactive contents, it also adopts the MPEG-4 scene description that refers to the spatio-temporal specifications and behaviors of individual objects. With more interactive contents, the scene description also needs higher bitrate. However, the bandwidth for allocating meta data, such as scene description is restrictive in the mobile environment. On one hand, the DMB terminal renders each media stream according to the scene description. Thus the binary format for scene(BIFS) stream corresponding to the scene description should be decoded and parsed in advance when presenting media data. With this reasoning, the transmission delay of the BIFS stream would cause the delay in transmitting whole audio-visual scene presentations, although the audio or video streams are encoded in very low bitrate. This paper presents the effective optimization technique in adapting the BIFS stream into the expected bitrate without any waste in bandwidth and avoiding transmission delays inthe initial scene description for interactive DMB content.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2006년도 학술대회 1부
• /
• pp.966-969
• /
• 2006

Interactive DMB contents are provided by MPEG-4 scene description. The abundant interactions of the user bring on the high bit rate of MPEG-4 scene description. But DMB system has low bandwidth and limited bit rate. So we need new authoring method for MPEG-4 scene description. In this paper, we proposed a seamless authoring method for the DMB environment. It can generate BIFS information tinily and dynamically. The research result can be used by DMB system for a seamless MPEG-4 contents transmission.

• 한국정보처리학회논문지
• /
• 제6권4호
• /
• pp.868-876
• /
• 1999

본 논문에서는 MPEG으로 압축된 비디오(MPEG-compressed video)를 대상으로 내용기반 색인(content-based indexing)에 기초가 될 동영상 자도 d분할에 관한 효과적인 방법을 제안한다. 제안하는 방법은 MPEG 시퀀스의Ⅰ(Intra), P(Predictive), B(bidirectional) 픽쳐 구성에 구애받지 않고 장면 전환점(scene change)을 검출해 낸다. 컷(cut) 검출을 위해서는 Ⅰ픽쳐의 dc 계수와 P, B 픽쳐의 매크로 블록 참조 특성을 이용하여 차이 측도(difference measure)를 설정한다. 그리고 점진적인 (gradual)장면 전환에서는 p, B 픽쳐의 참조 블록 비율을 이용하여 정확하게 장면 전환 지점을 검출한다. 이때 MPEG 시퀀스를 완전히 복원하지 않고 필요한 데이터만을 추출해 내어 전체 데이터 처리 과정을 좀 더 효율적으로 구성한다. 차이 척도의 성능과 검출 결과는 정확도(precision)와 완전추출도(recall)를 기준으로 비교분석하고, 제안한 방법을 다양한 MPEG 시퀀스에 적용시켜 검출 결과와 수행 시간 측면에서 그 효율성을 확인하였다.

• 한국컴퓨터정보학회논문지
• /
• 제4권3호
• /
• pp.28-34
• /
• 1999

본 논문에서는 DCT 영역에서 DCT블록내의 DC성분과 매크로블록내의 움직임 벡터성분을 이용하여 동영상 장면전환 자동 검출에 관한 방법을 제안한다. 제안하는 방법은 압축된 MPEG 신호열내의 픽쳐 종류와 상관없이 임의의 신호열에서 장면전환을 검출한다. 이를 위해 MPEG 신호열의 DCT 영역에서 픽쳐구성요소의 특징을 이용하여 새로운 비교잣대를 정의하고 움직임 벡터에 예민한 B-picture 의 특성을 이용하여 정확한 장면전환을 검출한다. 이때. I-picture를 가지고 급격한(cut) 장면전환을 검출하고 P. B picture 를 가지고 점진적인(gradual) 장면 전환을 검출한다. 제안한 방법은 다양한 MPEG 신호열에 대하여 시험결과 그 효율성이 우수함을 보인다.

• 방송공학회논문지
• /
• 제11권3호
• /
• pp.363-378
• /
• 2006

디지털멀티미디어방송(Digital Multimedia Broadcasting, DMB)은 고품질의 방송 영상 및 부가 데이터를 이동 중인 차량 내에서나 모바일폰, PDA 등과 같은 휴대형 단말에서 수신할 수 있는 이동 멀티미디어 방송 서비스이다. 미디어 및 상호작용 정보의 인코딩 규격으로는 MPEG-4 표준을 사용하며, 대화형 컨텐츠의 사용자 상호작용 등의 정보는 장면기술정보인 MPEG-4 BIFS(Binary Format for Scene)에 의해서 이루어진다. 사용자와의 상호작용이 풍부하고 장면 구성이 복잡한 컨텐츠일수록 BIFS 데이터가 전송되기 위해서 요구되는 비트율도 증가한다. 그러나 이동 단말에 고품질의 비디오 및 오디오 데이터를 전송하는 DMB 환경에서는 BIFS 스트림의 전송율은 매우 제한적이다. 한편 사용자 단말기에서 DMB 컨텐츠를 재생하려면 비디오, 오디오 등 미디어 객체들을 디코딩하기 전에 장면 구성 정보인 BIFS 스트림을 디코딩 및 파싱하여야 한다. 그러므로 MPEG-4의 높은 미디어 압축율에도 불구하고 제한된 대역폭과 장면 구성 정보 등 부가 데이터 전송 및 디코딩으로 인한 지연이 발생될 수 있다. 따라서 방송 컨텐츠의 특성 상 사용자의 임의 접근 시에도 재생될 컨텐츠의 BIFS 데이터를 파싱하여 대기 시간을 최소화하도록 초기 장면 구성 정보를 효율적으로 전송해야 한다. 본 연구에서는 지상파 DMB 대화형 컨텐츠의 장면기술정보인 BIFS 스트림을 저전송율 환경에 적응된 형태로 전달하기 위해서, 장면기술정보를 최적화하는 기법을 제안한다.

• 대한전자공학회논문지SP
• /
• 제47권5호
• /
• pp.25-33
• /
• 2010

최근의 오디오 기술은 사용자 중심으로 변화하고 있으며, 사용자의 환경과 의도에 따라 능동적으로 서비스가 이루어지는 대화형 오디오 서비스 시대로 변화하고 있다. 이에 맞추어 시장에서는 고품질 오디오 서비스를 위한 무손실 오디오 기술을 탑재한 멀티미디어 기기와 사용자가 선택적으로 악기를 조절할 수 있는 객체 오디오 음원 서비스가 이루어지고 있다. 본 논문에서는 사용자가 컨트롤 할 수 있는 실감 객체 오디오 파일 포맷을 설계하고 실감 정보를 낮은 복잡도에서 저장 매체와 전송 매체에 적용 가능한 오디오 장면 묘사 방법을 제안한다. 설계된 실감 객체 오디오 파일 포맷은 MPEG-4 파일 포맷을 기반으로 설계되었다. MPEG-4 파일 포맷은 MPEG-4에 속하는 고성능 오디오 코덱을 오디오 코덱 객체 번호를 통해서 쉽게 적용가능하다. 또한 오디오 객체 개수의 변화에 따라 파일 포맷의 트랙을 변화 시켜 사용하면 되므로 객체 오디오를 포함하기에 적절하다. 본 연구에서 개발된 파일 포맷은 실감 객체오디오 생성시 MPEG-4 오디오 코덱으로 압축된 객체 오디오, 실감 객체 오디오를 위한 오디오 장면 묘사 데이터를 독립적인 트랙으로 포함하고 있다. 포함된 오디오 장면 묘사 기법은 저장 매체를 위해 전체 오디오 장면에 적용되는 오디오 묘사 기법과 각각의 오디오 객체에 적용되는 오디오 묘사 기법을 노드 구조로 설계 하였으며, 전송 매체를 위해서 기본적인 객체 오디오 동작을 하기위한 필수 정보와 오디오 세부장면 묘사를 위한 정보로 분할하여 설계하였다. 이를 바탕으로 본 연구에서는 실감 객체 오디오 시뮬레이터를 개발하였다. 개발된 시뮬레이터는 객체 음원과 오디오 장면 묘사 정보를 부호화하여 MPEG-4 파일 포맷에 저장하며, 생성된 실감 객체 오디오 파일은 재생 모듈에서 오디오 객체에 입력 받은 사용자 정보와 오디오 장면 묘사 정보가 적용되어 사용자에게 몰입감이 높은 실감 오디오 서비스를 제공한다.