• 제목/요약/키워드: multimodal system

검색결과 227건 처리시간 0.021초

능동 시각을 이용한 이미지-텍스트 다중 모달 체계 학습 (Active Vision from Image-Text Multimodal System Learning)

  • 김진화;장병탁
    • 정보과학회 논문지
    • /
    • 제43권7호
    • /
    • pp.795-800
    • /
    • 2016
  • 이미지 분류 문제는 인간 수준의 성능을 보이지만 일반적인 인식 문제는 어려운 점들이 남아있다. 실내 환경은 다양한 정보를 담고 있어 정보 처리의 양을 효율적으로 줄일 필요성이 있다. 정보의 양을 효율적으로 줄일 수 있도록 대상 객체의 위치 측정을 위한 변분 추론, 변분 베이지안 등의 방법이 소개되었지만, 모든 경우에 대한 주변(marginal) 확률 분포를 구하기 어렵기 때문에 현실적으로 계산하기 어렵다. 본 연구에서는 공간 변형 네트워크(Spatial Transformer Networks)을 응용하여 능동 시각을 이용한 이미지-텍스트 통합 인지 체계를 제안한다. 이 체계는 주어진 텍스트 정보를 바탕으로 이미지의 일부를 효율적으로 샘플링 하도록 학습한다. 이를 통해 전통적인 방법으로 해결하기 어려운 문제를 상당한 격차로 성능을 향상 시킬 수 있다는 것을 보인다. 제안하는 모델을 통해 샘플링 된 이미지를 정성적으로 분석하여 이 모델이 가지는 특성도 함께 살펴본다.

증강현실 기반 제품 디자인의 몰입감 향상 기법 (Methodologies for Enhancing Immersiveness in AR-based Product Design)

  • 하태진;김영미;류제하;우운택
    • 전자공학회논문지CI
    • /
    • 제44권2호
    • /
    • pp.37-46
    • /
    • 2007
  • 본 논문에서는 증강현실 환경에서 제품 디자인 시, 가상객체를 재현하는 데 있어 몰입감을 향상 시킬 수 있는 기법들을 제안한다. 일반적으로 사용자가 가상의 객체와 상호작용을 하는 경우, 시각/청각/촉각 등의 다차원 감각을 사용자에게 제공하는 것은 몰입감을 향상시킬 수 있는 가장 보편적인 방법으로 알려져 있고, 이를 만족시키기 위해 다음과 같은 방법들을 제안한다. 대게 가상객체는 물리적인 존재가 없기 때문에 사용자에게 촉감을 제공하지 못하는 문제점이 있지만, 만질 수 있는 감각형 객체 (Tangible object)에 가상객체를 정합함으로써, 가상객체는 촉감을 제공할 수 있다. 또한 손을 이용하여 가상객체와 상호작용 할 때, 가상객체의 렌더링에 의해 손이 가려지는 어색한 증강결과를 부분적으로 해결함으로써, 시각적으로 자연스런 증강결과를 사용자에게 제공할 수 있다. 마지막으로, 가상객체와 상호작용 시 발생하는 이벤트에 따라, 페이지 모터 (Page motor)를 통한 진동 피드백과 공기촉감 피드백 그리고 사운드 피드백을 제공하여 다차원 피드백 (Multimodal feedback)을 가능케 하여 몰입감을 한층 향상시킨다. 어플리케이션으로써 게임 폰 모델의 재현 시스템을 구현하였고, 사용자는 가상 게임폰이 정합된 감각형 객체를 손에 쥐고 기울임으로써 레이싱 게임의 자동차를 조종할 수 있고, 동시에 제안된 촉각 피드백과 손 가림 현상이 줄어든 시각적인 효과 그리고 이벤트에 따른 사운드 피드백이 동시에 사용자에게 제공된다. 이 제안된 방법론들은 기존 AR 시스템의 실감 모델의 재현에 있어 몰입감을 향상시키는데 공헌을 할 수 있다.다. 제주지역 목장 토양 및 조사료에서 특정 미량광물질이 결핍되어 있는 것으로 보이지 않는다. 따라서 가축에게 미량광물질 첨가제의 보충급여는 사양형태나 사료 미량광물질의 함량 및 이용도 등을 고려하여 결정해야 할 것으로 사료된다.$100^{\circ}C$ 30분 또는 $121^{\circ}C$에서 15분간의 열처리(autoclave)에 의해서 항균활성이 감소되지않는 것으로 나타났다. 따라서 약용으로 이용되고 있는 천궁의 근경 이외의 미활용자원인 잎과 줄기 등의 지상부위를 이용한 천연 항균소재 개발이 가능할 것으로 판단된다. 따르면, 버들치 (Rhynchocypris oxycephalus), 갈겨니 (Zacco temmincki)와 같은 수질에 대해 민감한 어종은 상류(S1 ${\sim}$ S2)에서의 출현빈도가 하류지점에의 출현빈도에 비해 뚜렷하게 높게 나타나 수질 특성을 반영하는 것으로 나타났으며, 트로픽구조 측면에서 내성종 (Tolerant species)및 잡식성종(Omnivore species)이 하류로 갈수록 증가하는 경향을 보였다.대가 발달한다. 이것으로 볼 때 지열류량은 지질구조와 무관하지 않음을 파악할 수 있다. 특히 이러한 단층대 주변은 지열수의 순환이 깊은 심도까지 가능하므로 이러한 대류현상으로 지표부근까지 높은 지온 전달이 되어 나타나는 것으로 판단된다.의 안정된 방사성표지효율을 보였다. $^{99m}Tc$-transferrin을 이용한 감염영상을 성공적으로 얻을 수 있었으며, $^{67}Ga$-citrate 영상과 비교하여

국내 아동학대의 현황 및 신고체계 (The present state of chid abuse in Korea and its system for child protection)

  • 배기수;김신영;정영기;류경희
    • Clinical and Experimental Pediatrics
    • /
    • 제52권11호
    • /
    • pp.1185-1193
    • /
    • 2009
  • An act of children's welfare was made in 1961 for the first time in Korea but it had been nothing but the name in view of practical impact to prevention of child abuse. Real undertakings of Child Abuse Prevention were commenced overtly since 2000 in Korea, when the law for children's welfare was revised to put protective settings for the victims and to establish criterion for children's safety. The history of Child Abuse Prevention is very short in Korea but the reporting cases increased very fast from 4,133 cases in 2001 up to 9,570 cases in 2008 with the enthusiastic activities from people of the associated organizations along with the national supports. But the portion reported by the mandated reporters such as teachers or doctors is still low compared to those of the developed countries. The National Child Protection Agency (NCPA) was founded in 2001 by the Ministry of Health and Welfare to prevent child abuse and to aid recovery of abused and neglected children including their families, through the cooperation of related organizations. NCPA refers reported cases of child abuse to appropriate local centers, operates a computer database system for case management, publicizes national reports of child abuse on a yearly basis and technically supports the Local Child Protection Agency (LCPA) by developing scales for assessment of child abuse and neglect and distributing programs for the education of mandatory reporters. LCPAs operate 24-hour telephone hotline, investigate and visit homes and provide in home services networking with local resources, and operate multidisciplinary teams for screening child abuse victims and supervising case management through multimodal systems. We summarized the present state of child abuse in Korea and reviewed the operating systems for child protection in this country. Through this article, we hope that medical peoples are to be informed on the seriousness of child abuse and to be able to devote themselves for the prevention of child abuse.

기능성 Bio-Game의 활용 방안에 관한 연구 (Research on Effective Use of A Serious Bio-Game)

  • 박성준;이준;김지인
    • 한국게임학회 논문지
    • /
    • 제9권1호
    • /
    • pp.93-103
    • /
    • 2009
  • 기능성 게임은 게임기술과 게임이론을 바탕으로 개발된 하드웨어 및 소프트웨어 애플리케이션으로 즐거움 외에 교육 및 특정 분야의 문제해결 등의 다른 목적을 가지는 게임을 말한다. 이러한 기능성 게임은 게임적인 재미뿐만 아니라 교육적인 효과 때문에 과학기술 분야 및 산업 기술 분야의 교육 및 훈련에 유용하다. 본 연구에서는 사용자가 직관적인 멀티 모달 인터페이스를 사용하여 생명공학에 적용한 기능성 게임을 제안한다. 이를 위하여 3차원 분자 구조를 특수 모니터를 사용하여 입체 시각화 하였으며 입체 영상화된 분자 구조를 효율적으로 제어하기 위하여 멀티 모달 인터페이스인 WiiRemote를 사용하였다. 본 논문에서 제안된 시스템은 분자도킹 시뮬레이션이 가지던 문제점인 3차원 분자 모델들의 결합 및 조작이 사용자의 직관과 경험에 많이 의존하기 때문에 초보자들의 접근이 어려운 점을 게임적 요소를 적용하여 재미를 느끼게 하면서 해결하도록 하였다. 이를 위해 사용자가 조작을 하는 객체와 사용자의 수에 따른 게임적 요소인 레벨 업 개념을 적용하여 반복학습이 이루어지도록 하였다. 실험은 AIDS 바이러스와 신약 치료 후보 물질을 대상으로 사용자가 바이러스와 후보 물질이 결합되는 위치인 Active Site를 찾는 도킹 실험을 하였으며 바이오 기능성 게임을 적용하지 않은 기존의 방법과 비교를 하였다.

  • PDF

물류센터 경유를 고려한 화물운송 경로 모형 개발 (Development of Freight Transport Route Model by Considering Logistics Center)

  • 조민지;김환성
    • 한국항해항만학회지
    • /
    • 제39권1호
    • /
    • pp.61-67
    • /
    • 2015
  • 국내의 화물 운송량은 꾸준히 증가하고 있으며 이에 따라 내륙지역의 화물운송량 예측에 관한 연구가 활발하게 진행되고 있다. 하지만 종래의 기종점 자료(O/D Data)는 화물 운송수단의 출발지와 목적지를 조사하여 구축하였으며 이는 화물의 운송 특성을 제대로 반영시키지 못하는 문제점을 지니고 있다. 화물의 운송은 단순히 출발지에서 목적지로 화물을 운반하는 것이 아니라 화물운송 도중에 운송수단을 변경하거나 화물의 임시 보관이 필요한 경우가 발생하므로 화물운송모형에서는 중간 경유지(물류센터 또는 내륙컨테이너기지)를 포함시켜야 된다. 본 논문에서는 이러한 중간 경유지를 고려한 기종점 자료의 필요성을 인식하였고 물류센터를 고려한 화물운송 경로에 대한 모형을 제시하고자 한다. 본 연구가 제시하는 화물운송 경로모형은 각 구간별 운송계수를 설정하고 이에 따라 화물량을 예측하는 모형으로서 유전 알고리즘을 이용하여 모형을 검증하였고 오차의 범위가 ${\pm}1.0%$이내로써 모형은 타당한 것으로 판단된다.

공간정보와 통합 스마트카드 자료를 활용한 도시철도 역사 보행 기종점 분석 기법 개발 (A Comprehensive Framework for Estimating Pedestrian OD Matrix Using Spatial Information and Integrated Smart Card Data)

  • 정은비;유소영;이준;김경태
    • 대한교통학회지
    • /
    • 제35권5호
    • /
    • pp.409-422
    • /
    • 2017
  • TOD (Transit-Oriented Development)는 대중교통 중심의 복합기능을 가진 집약적인 도시구조이며, 미래지향형 지속가능한 도시를 유지하기 위해 제시되는 개념이다. 최근 도시철도 역사를 중심으로 복합 환승센터 개발이 활발히 추진되고 있으며, 사업의 규모와 복잡성으로 인해 보다 과학적이고 객관적인 분석을 통한 계획과 유지관리 등이 요구되고 있다. 이에 따라, 본 연구에서는 공간정보와 통합 스마트카드 자료를 활용하여 도시철도 역사 보행 기종점 추정을 위한, 표준화된 분석 절차를 개발하고자 하였으며, 삼성역 사례 분석을 통해 제시된 분석 절차 및 방법에 대한 검증을 수행하였다. 본 연구에서 제시된 분석 절차는 자료 수집 기술과 빅데이터 DB 분석 기법 발전에 따라 유기적 확장 가능한 분석 환경을 마련하였다는 데 큰 의의를 가진다.

얼굴과 발걸음을 결합한 인식 (Fusion algorithm for Integrated Face and Gait Identification)

  • ;안성제;홍성준;이희성;김은태;박민용
    • 한국지능시스템학회논문지
    • /
    • 제18권1호
    • /
    • pp.72-77
    • /
    • 2008
  • 개인 식별 연구는 보안, 감시 시스템에서 중요한 부분이다. 최선의 성능을 가진 시스템을 설계하기 위하여 감지기들로부터 최대 정보를 이용할 수 있도록 설계한다. 다양한 생체 인식 시스템은 등록, 확인, 또는 개인 식별을 위하여 생리 특성이나 행동 특성을 하나이상 활용한다. 발걸음 인식만을 가지고는 아직 개인별 변별적 특징을 안정적으로 나타내지 못하므로, 본 논문에서는 얼굴과 발걸음을 결합한 개인 식별 시스템을 제안한다. 본 논문에서 우리는 한 개의 카메라를 이용한다. 즉, 얼굴과 발걸음 인식 모두 하나의 카메라를 이용하여 획득된 같은 이미지 셋을 사용한다. 본 논문의 중점은 이미지들에서 이용할 수 있는 최대 정보량을 활용하는 것으로 시스템의 성능을 향상시키는 것이다. 결합은 결정 단계에서 고려된다. 제안된 알고리듬은 NLPR 데이터베이스를 사용한다.

Analytic Hierarchy Process Modelling of Location Competitiveness for a Regional Logistics Distribution Center Serving Northeast Asia

  • Kim, Si-Hyun;Lee, Kwang-Ho;Kang, Dal-Won
    • Journal of Korea Trade
    • /
    • 제24권3호
    • /
    • pp.20-36
    • /
    • 2020
  • Purpose - As the global product network expands through both internationalization and diversification of the multimodal transportation system, corporate strategies have shifted to emphasize the importance of a high value-added international logistics system. To guide policies and strategies to attract relevant industries, this study aims to analyze the location competitiveness of regional logistics distribution center to serve Northeast Asia. Design/methodology - Multi-criteria techniques are considered to offer a promising framework for evaluating decision-making factors. This paper employed an analytic hierarchy process to analyze the hierarchal structure of determinants for selecting the location of a regional logistics distribution center. Adopting both qualitative and quantitative evaluations, this study suggest political implications for a regional logistics distribution center development, such as the direction of political support, service differentiation and infrastructure development. Findings - This study developed a location competitiveness evaluation model, based on the case study of the major port-cities in Northeast Asia. Evaluation model incorporates five factors underpinning 17 components extracted using factor analysis. The results revealed that the logistics factor is the most significant factor for evaluating the competitiveness of a regional logistics distribution center. The remaining factors were market, costs, and services environment. Comparing qualitative and quantitative evaluations, results provide useful insights for a regional logistics distribution center development in Northeast Asia. Originality/value - This study revealed differences between qualitative and quantitative evaluations. The finding implies that prior works on evaluation models of competitiveness has not successfully measured the gap between quantitative data and expert' evaluations. To overcome this limitation, this paper considered both actual data such as actual distance, cost, the number of companies located, and expert opinions.

메타버스 대화의 몰입감 증진을 위한 대화 감정 기반 실시간 배경음악 시스템 구현 (Real-time Background Music System for Immersive Dialogue in Metaverse based on Dialogue Emotion)

  • 김기락;이상아;김나현;정문열
    • 한국컴퓨터그래픽스학회논문지
    • /
    • 제29권4호
    • /
    • pp.1-6
    • /
    • 2023
  • 메타버스 환경에서의 배경음악은 사용자의 몰입감을 증진시키기 위해 사용된다. 하지만 현재 대부분의 메타버스 환경에서는 사전에 매칭시킨 음원을 반복 재생하며, 이는 빠르게 변화하는 사용자의 상호작용 맥락에 어울리지 못해 사용자의 몰입감을 저해시키는 경향이 있다. 본 논문에서는 보다 몰입감 있는 메타버스 대화 경험을 구현하기 위해 1) 한국어 멀티모달 감정 데이터셋인 KEMDy20을 이용하여 발화로부터 감정을 추출하는 회귀 신경망을 구현하고 2) 음원에 arousal-valence 레벨이 태깅되어 있는 DEAM 데이터셋을 이용하여 발화 감정에 대응되는 음원을 선택하여 재생한 후 3) 아바타를 이용한 실시간 대화가 가능한 가상공간과 결합하여 몰입형 메타버스 환경에서 발화의 감정에 어울리는 배경음악을 실시간으로 재생하는 시스템을 구현하였다.

웹상의 BioAPI에 기반한 서명 다중 인증 시스템 (A Multiple Signature Authentication System Based on BioAPI for WWW)

  • 윤성근;김성훈;전병환
    • 한국정보과학회논문지:소프트웨어및응용
    • /
    • 제31권9호
    • /
    • pp.1226-1232
    • /
    • 2004
  • 차세대 보안 시장을 이끌어갈 신기술로 생체 인증 기술이 부상하고 있으나, 기존 시스템들은 대부분 생체 특징에 따라 개별 단위의 인증 방식을 제공하고 있다. 최근에는 이러한 개별 시스템들을 통합할 수 있도록 표준화하기 위한 연구가 활발히 이루어지고 있다. 본 논문에서는 생체 인증 기술의 표준화를 위해서 BioAPI 협회에서 발표한 BioAPI 명세서를 따르면서, 필기 서명이라는 단일 생체측정에 대해 함수적, 매개변수적, 구조적 접근법의 서로 다른 세 가지 검증기를 적용한 웹기반 인증 시스템을 제안한다. 시스템은 클라이언트-서버 구조이고, 클라이언트와 서버는 각각 BioAPI 규격에 따라 크게 세 계층으로 구성된다. 제안한 웹기반 단일 생체측정의 다중 인중 시스템은 사용자의 인증 거부율이 다소 증가되더라도 별도의 여러 생체측정을 요구하지 않으면서도 인증의 신뢰도를 크게 향상시킬 수 있다. 즉 세가지 서명 검증기를 결합한 경우, 사용자의 인증 거부율(FRR)이 약 2.7배 증가하였지만 오류 승인률(FAR)은 4만분의 1로 감소하는 것으로 나타났다. 따라서 제안한 방법은 개방형 네트워크인 인터넷에서의 효과적인 신원확인 방법으로 활용될 수 있으며, 또한 다양한 생체측정을 이용하는 시스템으로 쉽게 확장될 수 있다.