• 한국정밀공학회지
• /
• 제28권5호
• /
• pp.638-647
• /
• 2011

Various approaches directly using vibrations of speakers have been suggested to effectively display the aural information such as the music to the hearing-impaired or the deaf. However, in these approaches, the human can't sense the frequency information over the maximum perceivable vibro-tactile frequency (around 1kHz). Therefore, in this study, an approach via spectral modulation of compressing the high frequency audio information into perceivable vibro-tactile frequency domain and outputting the modulated signals through the designated speakers is proposed. Then it is shown, through simulations of using Short-Time Fourier Transform (STFT) with Hanning windows and through preliminary experiments of using the vibro-tactile display testbed which is built and interfaced with a notebook PC, that the modulated signal of a natural sound composing sounds of a frog, a bird, and a water stream could produce the noise-free signal suitable enough for vibro-tactile speakers without causing Significant interfering disturbances, Lastly, for three different combinations of information provided to the subject, that is, i) with only video image, ii) with video image along with the modulated vibro-tactile stimuli as proposed in this study to the forearm of the subject, and iii) with video image along with full audio information, the effects to the human sense of reality and his emotion to given audio-video clips including various sounds and images are investigated and compared. It is shown from results of those experiments that the proposed method of providing modulated vibro-tactile stimuli along with the video images to the human has very high feasibility to transmit pseudo-aural sense to the human.

• 융합정보논문지
• /
• 제10권7호
• /
• pp.223-231
• /
• 2020

노인 운전자는 기능저하로 인해 사고 위험성이 증가하지만 스스로 변화를 점검하는 자가-조절 능력 또한 발달한다. 이에 실제 노인 운전자가 운전 능력과 위험성 변화에 대응하는 특성에 대한 정보는 노인의 운전 능력 평가 현장과 연구에 의미있는 근거를 제공할 수 있다. 따라서 본 연구의 목적은 한국 노인 운전자의 운전 위험성 자각 특성을 운전 중 행동과 운전관련 기능변화의 측면에서 분석하여 노인 운전자 평가를 위한 기초 자료를 제공하는 것이다. 지역사회에 거주하는 노인 운전자 500명을 대상으로 자가-보고식 평가를 실시하고 노인 운전자의 운전 위험성 자각 징후를 분석하였다. 그 결과 다수의 노인 운전자가 시각 및 청각이 저하되거나 운전 여건 변화에 적응하는데 어려움을 느낄 때 운전 위험성을 자각하는 특성이 있음을 확인하였다. 반면, 약물 복용이나 간질, 발작, 의식손실 등 의학적 건강 상태 변화에는 둔감하게 반응하는 특성이 확인되었다. 본 연구 결과가 고령화가 가속화되는 한국의 노인 운전자 안전 관리에 기여할 수 있기를 기대한다.

• 한국정보처리학회논문지
• /
• 제7권3호
• /
• pp.756-765
• /
• 2000

In this paper, a korean text to sign language translation system is designed and implemented for the hearing impaired people to learn letters and to have a conversation with normal people. We adopt the direct method for machine translation which uses morphological analysis and the dictionary search. And we define the necessary sign language dictionaries. Based on this processes, the system translate korean sentences to sign language moving picture. The proposed dictionaries are composed of the basic sign language dictionary, the compound sing language dictionary, and the resemble sign language dictionary. The basic sign language dictionary includes basic symbols and moving pictures of korean sign language. The compound sing language dictionary is composed of key-words of basic sign language. In addition, we offered the similar letters at the resemble sign language dictionary. The moving pictures of searched sign symbols are displayed on a screen in GIF formats by continuous motion of sign symbols or represented by the finger spelling based on the korean code analysis. The proposed system can provide quick sign language search and complement the lack of sign languages in the translation process by using the various sign language dictionaries which are characterized as korean sign language. In addition, to represent the sign language using GIF makes it possible to save the storage space of the sign language. In addition, to represent the sign language using GIF makes it possible to save storage space of the sign language dictionary.

• Neonatal Medicine
• /
• 제15권1호
• /
• pp.89-93
• /
• 2008

염색체 12번 단완의 중복(첨가)는 매우 드문 질환이며 선천성 기형과 발육 장애를 동반하는 것으로 생각된다. 저자들이 경험한 증례는 다발성 이형성 특색과 선천성 기형을 가지고 태어난 남아로 핵형은 46,XY,add(12) (p13.3)이었다. 출생 시 자궁내 성장부진과 소두증, 소하악증, 구개열, 낮은 변형 귀와 같은 비정상 두개 안면소견을 보였으며, 소음경증, 양발의 rocker bottom 변형 소견을 보였다. 추후 확인한 검사에서 심장 및 신장기형, 신경성 난청 등의 다발성 기형을 보였으며 이후 경련성 질환과 발달 지연 소견으로 외래에서 추적 관찰중이다. 염색체 12번의 첨가에 관련된 증례를 경험하였기에 저자들은 문헌고찰과 함께 보고하는 바이다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2015년도 추계학술발표대회
• /
• pp.1019-1022
• /
• 2015

사회적 약자인 청각장애인들의 수화통역 서비스가 대체로 만족스럽게 제공되고 있지 않다. 또한 청각 장애인수 대비 수화통역가의 부족과 일반인과의 즉각적인 소통이 어려워 일상생활에 불편함을 느끼는 청각장애인들이 많다. 이의 문제점을 착안하여 본 연구에서는 청각장애인들이 휴대할 수 있는 수화 통역기를 개발하고자 한다. 청각장애인들의 손동작을 인식할 수 있는 3D센서 립모션(Leap-Motion)을 통해 수화를 인식한다. 립모션 센서와 안드로이드 스마트폰 및 태블릿과 연결하여 손 데이터 값을 분석했다. 분석한 손 데이터 값과 특정 지화(자음, 모음)와 간단한 인사말의 수화동작을 취할 때, 트래킹되는 데이터 값을 비교하여 수화를 인식하고 수화와 인식된 지화의 자음과 모음을 글자로 완성시켜, 텍스트와 음성으로 출력한다. 또한 립모션이 부착된 하드케이스 안에 스마트기기 탈착이 가능한 실용성 있는 수화통역기 제품 개발에 대한 연구를 목표로 하고 있다.

• 한국멀티미디어학회논문지
• /
• 제23권12호
• /
• pp.1464-1475
• /
• 2020

Due to the spread of COVID-19, the online lecture has become more prevalent. However, it was found that a lot of students and professors are experiencing lack of communication. This study is therefore designed to improve interactive communication between professors and students in real-time online lectures. To do so, we explore deep learning approaches for automatic recognition of students' facial expressions and classification of their understanding into 3 classes (Understand / Neutral / Not Understand). We use 'BlazeFace' model for face detection and 'ResNet-GRU' model for facial expression recognition (FER). We name this entire process 'Degree of Understanding (DoU)' algorithm. DoU algorithm can analyze a multitude of students collectively and present the result in visualized statistics. To our knowledge, this study has great significance in that this is the first study offers the statistics of understanding in lectures using FER. As a result, the algorithm achieved rapid speed of 0.098sec/frame with high accuracy of 94.3% in CPU environment, demonstrating the potential to be applied to real-time online lectures. DoU Algorithm can be extended to various fields where facial expressions play important roles in communications such as interactions with hearing impaired people.

• 한국노년학
• /
• 제40권3호
• /
• pp.443-458
• /
• 2020

본 연구는 한국 남녀 노인의 여가활동과 인지기능 간 관계를 탐구하는데 그 목적이 있다. 연구의 목적을 위해 국내 지역사회에 거주하고 있는 65세 이상 노인에 대한 대표성 있는 자료인 노인실태조사 자료를 활용하여 주요변수에 대한 결측값이 없는 10,055명에 대해 로지스틱 회귀분석을 실시하였다. 여가활동은 생산적 및 소비적 여가활동, 미분류 활동의 세 가지 유형으로 구분하였으며 치매선별용 한국어판 간이정신상태검사(Mini Mental Status Examination for Dementia Screening)의 연령, 성별, 교육수준별 기준 점수에 미달하는 경우 인지기능 장애가 있는 것으로 보았다. 연구결과 여가활동 유형 중에서 생산적 여가활동이 유일하게 남녀 한국 노인의 인지기능 장애 관련 요인으로 나타났으며 소비적 여가활동과 미분류 활동은 유의한 관계를 확인할 수 없었다. 생산적 여가활동 외에 연령, 교육수준, 경제활동 참여, 주관적인 청각 장애 및 우울감이 유의한 관련변수로 나타났다. 본 연구결과를 통해 향후 노인 여가정책에 대한 방향을 제시하였다.

• 감성과학
• /
• 제15권4호
• /
• pp.441-452
• /
• 2012

최근 들어 청각 장애인들에게 정상인들이 소리로부터의 느끼는 청감과 유사한 느낌을 전달하기 위한 방안으로써 시각은 물론 진동감과 같은 촉감을 활용하는 연구가 시도되고 있다. 특히 시각 정보의 보조 감각으로써 스피커나 진동 모터를 이용한 촉감이 제공되는 경우 생동감은 상당히 개선되는 측면이 있으나 정서감 측면에서는 그 효과가 거의 없는 것으로 보고되었다. 따라서 본 연구에서는 유사 청감을 재현할 수 있는 또 하나의 보조 감각으로서 열감을 설정하고 열감이 유사 청감 재현 효과를 가질 수 있는가에 관하여 조사하였다. 이를 위해 열감을 효과적으로 재현할 수 있는 열감 재현 모듈을 구현하였다. 그리고 실험 대상자들에게 시각 정보와 더불어 청각 정보, 진동 촉감, 그리고 열감을 혼합한 다양한 형태의 자극을 제공한 실험을 수행하였다. 실험에서 얻어진 데이터 통계 분석을 통하여 i) 영상과 함께 열감 자극을 제공하거나 또는 ii) 영상과 함께 열감 자극과 진동 자극을 동시에 제공하는 경우가 영상만을 제공하는 경우보다 실험 대상자들이 영상과 소리로부터 느끼는 실제 열감에 더 가까운 유사 열감을 느낄 수 있다는 사실을 확인하였다. 결론적으로 실험 대상자의 피부에 제공되는 열감이 유사 청감 재현 보조 매체로서의 활용 가능성이 있음을 확인할 수 있었다.

• International Journal of Railway
• /
• 제1권4호
• /
• pp.143-148
• /
• 2008

This paper is the output of a collaborative European project concerning the barrier free accessibility for disabled persons to regional and long distance trains in Europe. Disabled people represent around 13% of the population in Europe. This is approximately 63 million people. The range of disabilities includes people with reduced mobility including wheel chair users, viewing and hearing impaired people and other forms of impairment. Improving accessibility aims at contributing to the provision of public transport services to all citizens in an equitable way. The purpose of the project was to analyse and to evaluate the existing solutions at selected European railways for all required modules at the entrance (doors, information and safety solutions), to derive a design concept, to develop a mock-up in meeting the needs of rail travellers with the above mentioned impairments and to test it with user groups. The project also aims at deriving components for the determination of standards. The EUPAX Design Mock-up test was performed to verify the advantages of the layout of the train segment including the different modules such as access area (including the access door, gaps between platform and train as well as boarding aid devices), entrance vestibule, information systems inside and outside the train, emergency facilities, toilet with all conveniences and the additional test arrangements regarding push buttons, steps and emergency equipment. For this purpose a questionnaire was developed for the assessment of the EUPAX segment and the additional test arrangements. With the help of this questionnaire it was possible to execute a quantitative and qualitative evaluation. During three test phases 67 experts and handicapped persons from 6 countries have evaluated the Industrial Design mock-up based on this questionnaire. The test group covered persons from North (Denmark) to the South (Italy) and from the West (Spain) to the Middle of Europe (Germany). This is especially important for the generalization (harmonisation) of the results for all European countries. According to COST 335 the information for people with reduced mobility should be clear, concise, accurate and timely. So that all information can be received from persons, they must be transferred on at least two of the three possible ways (acoustical, visual, tactile), a so called "2-sense-principle". Based on the results ergonomic specifications/ solutions for the ergonomic design of the access area, the acoustic, visual and tactile information and the emergency devices including the emergency communication system were developed, related to the benefiting passenger groups.

• 한국정보전자통신기술학회논문지
• /
• 제12권5호
• /
• pp.512-520
• /
• 2019

음성을 시각적으로 표현하는 것은 외국어를 습득하는 과정의 학습자나 음성을 직접 들을 수 없는 청각장애자에게 매우 유용하며 기존에 다수의 연구가 이루어졌다. 그러나 기존의 연구들은 발음의 특징을 단지 컬러로 표현한다든가 입모양을 3차원 그래픽으로 표현하거나 입과 구강의 변화하는 형태를 애니메이션으로 보여 주는 방식에 머물러 있다. 따라서 이런 방식을 사용하는 학습자들은 자신의 발음이 표준 발음과 얼마나 멀리 떨어져 있는지 알 수가 없고 더 나아가서 학습 중에 스스로 교정을 해 나가는 시스템을 개발하기가 기술적으로 어려운 단점이 있다. 이를 극복하기 위해 본 논문에서는 음성 간의 상대적 거리를 토대로 음성을 시각화하는 모델을 제시하고, 이를 한국어 모음에 적용하여 모음의 음성적 특징을 이용한 시각화의 구체적인 구현 방법을 제시한다. 음성데이터에서 F1, F2, F3의 세 개의 포먼트를 구하고 이들 특징벡터를 코호넨 자기조직화맵 알고리즘으로 2차원 화면에 사상하여 각 음성을 화면 위의 각 점에 대응하여 표현하였다. 제안하는 시스템의 실제적인 구현은 인터넷에 공개된 음성처리 공개소프트웨어를 사용하고 한국인 교사의 표준 발음과 한국어를 배우고 있는 외국인 유학생의 음성을 이용하여 음성특징의 상호간 거리를 구하였으며, 사용자 인터페이스는 자바스크립트를 이용하여 구현하였다.