• 제목/요약/키워드: Visual sentence

검색결과 34건 처리시간 0.032초

FakedBits- Detecting Fake Information on Social Platforms using Multi-Modal Features

  • Dilip Kumar, Sharma;Bhuvanesh, Singh;Saurabh, Agarwal;Hyunsung, Kim;Raj, Sharma
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제17권1호
    • /
    • pp.51-73
    • /
    • 2023
  • Social media play a significant role in communicating information across the globe, connecting with loved ones, getting the news, communicating ideas, etc. However, a group of people uses social media to spread fake information, which has a bad impact on society. Therefore, minimizing fake news and its detection are the two primary challenges that need to be addressed. This paper presents a multi-modal deep learning technique to address the above challenges. The proposed modal can use and process visual and textual features. Therefore, it has the ability to detect fake information from visual and textual data. We used EfficientNetB0 and a sentence transformer, respectively, for detecting counterfeit images and for textural learning. Feature embedding is performed at individual channels, whilst fusion is done at the last classification layer. The late fusion is applied intentionally to mitigate the noisy data that are generated by multi-modalities. Extensive experiments are conducted, and performance is evaluated against state-of-the-art methods. Three real-world benchmark datasets, such as MediaEval (Twitter), Weibo, and Fakeddit, are used for experimentation. Result reveals that the proposed modal outperformed the state-of-the-art methods and achieved an accuracy of 86.48%, 82.50%, and 88.80%, respectively, for MediaEval (Twitter), Weibo, and Fakeddit datasets.

검색어 생성을 위한 딥 러닝 기반 문장 분석 연구 (Deep Learning based Sentence Analysis for Query Generation)

  • 나성원;윤경로
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2018년도 하계학술대회
    • /
    • pp.336-337
    • /
    • 2018
  • 최근 이미지의 Visual 정보를 추출하고 Multi label 분류를 통해 나온 결과의 상관관계를 modeling하여 문장으로 출력하는 CNN-RNN 아키텍처가 많은 발전을 이뤘다. 이 아키텍처의 출력은 이미지의 정보가 요약되어 문장으로 표현되기 때문에 Semantic정보가 풍부하여 유사 콘텐츠 검색에도 사용 가능하다. 하지만 결과 문장에 사람이 포함 되면 광범위한 검색 결과를 얻게 되고 부정확한 결과를 초래하게 된다. 이에 본 논문에서는 문장에서 사람을 인식하여 Identity를 부여함으로써 검색어를 좀 더 구체적으로 생성하고자 한다. 이 문제를 해결하기 위해 자연어 처리의 분야 중 하나인 개체명 인식(Named Entity Recognition) 문제로 다루며, 가장 많이 사용되고 있는 모델인 Bidirectional-LSTM-CRF와 CoNLL2003 dataset을 사용하여 수행 한다.

  • PDF

유아 언어 교육을 위한 모바일 증강현실 어플리케이션 (Mobile Augmented Reality Application for Early Childhood Language Education)

  • 강상훈;신민우;김민지;박한훈
    • 방송공학회논문지
    • /
    • 제23권6호
    • /
    • pp.914-924
    • /
    • 2018
  • 본 논문에서는 마커기반의 증강현실을 이용한 유아 언어교육 안드로이드 응용프로그램을 구현하고자 한다. 동물을 나타내는 단어(명사) 마커, 크기/색상을 나타내는 단어(형용사) 마커, 동작을 나타내는 단어(동사) 마커를 퍼즐 형태로 조합하여 간단한 문장을 완성하면, 문장의 내용과 관련된 가상 콘텐츠를 보여준다. /예를 들어, 동물 마커를 카메라에 비추었을 때 해당하는 동물의 모습이 나타나고 부가적으로 동작 마커를 조합할 경우 동물의 모습이 해당하는 동작을 하는 애니메이션으로 변화한다. 사용자가 스마트폰 화면에 나타난 마커를 눌렀을 때 해당하는 단어의 소리를 출력하게 하여 청각적 효과를 더 했고 모델의 회전기능을 더해 애니메이션을 방향에 관계없이 볼 수 있게 하였다. 시각적, 청각적 자극을 통해 유아 스스로 언어 학습에 적극 참여 할 수 있게 유도함으로써 언어학습의 흥미를 높이고 단어의 의미 및 간단한 문장구조에 대한 교육효과를 증대시키는 것을 목표로 한다.

DML(Diagram Markup Language) 시스템의 설계 및 구현 (A Design and Implementation of DML(Diagram Markup Language) System)

  • 김성근;김영철;유재우
    • 한국통신학회논문지
    • /
    • 제30권3B호
    • /
    • pp.95-104
    • /
    • 2005
  • 다이어그램은 직관성과 간결성을 갖는 장점이 있어 현재의 컴퓨팅 환경에서 많은 분야에 널리 사용되고 있다. 하지만 다이어그램 작성에 대한 표준화된 방법의 부재(不在)로 소프트웨어 상호간의 자료공유가 어렵고 다이어그램 컴포넌트와 규칙을 직접 프로그래밍 해야 하기 때문에 많은 시간과 노력을 필요로 한다. 이러한 문제점을 해결하고자 본 논문에서는 표준화된 문서규약인 XML을 이용해 다이어그램 컴포넌트의 형태와 행위를 정의하는 방법, 다이어그램의 규칙과 의미를 기술하는 방법에 대해 제안하고 제안한 XML 문서가 실행될 수 있는 다이어그램 시스템의 설계 및 구현에 관하여 논의한다. 본 다이어그램 시스템에서는 DML 그래픽 편집기를 제공하여 WYSWYG 방식으로 다이어그램 컴포넌트를 정의하고 자동으로 DML 문서를 생성할 수 있도록 함으로써 더욱 효율적으로 새로운 다이어그램을 개발할 수 있도록 하였다. 뿐만 아니라 DTD를 이용해 다이어그램에 대한 문법을 정의함으로써 문서의 구조를 정의하는 DTD에 대한 의미적 일관성을 유지하였으며 Semantic Definition XML을 이용하여 의미를 기술할 수 있도록 하였다. 또한 다이어그램 시스템에서 다이어그램 문장에 대한 문법검사와 의미실행의 방법은 VPL(Visual Programming Language)의 여러 개념들을 이용하였다.

한글기반 중심외보기 훈련 프로그램이 읽기속도에 미치는 효과: 사례연구 (Effects of the Eccentric Viewing Training Software Based on Korean for Reading Speed: A Case Study)

  • 홍승표
    • 디지털융복합연구
    • /
    • 제16권7호
    • /
    • pp.441-449
    • /
    • 2018
  • 본 연구는 중심부 암점 환자에게 적용하기 위한 한글기반 중심외보기 훈련 소프트웨어를 구성하고, 정안인을 대상으로 프로그램의 효과성을 파악하고자 하였다. 한글기반 중심외보기 훈련 소프트웨어는 신속순차시각제시를 이용한 한글자극으로 구성하였다. ABA 설계(ABA design) 개별실험연구설계를 위해 정안인 남자 대학생 2명에게 훈련 전후 기초선 각 3회기, 훈련은 3주간 8회기를 시행하고, 매회기 단문읽기속도를 측정하였다. 중심외보기 훈련 프로그램은 단어읽기 훈련 3단계와 문장읽기 훈련 2단계, 총 5단계로 구성하였다. 구성된 프로그램 훈련 결과, 단문읽기속도는 훈련전보다 훈련 후 2표준편차 이상 증가하였음을 나타냈다. 본 연구를 통하여 한글기반의 체계적인 중심외보기 훈련 소프트웨어를 구성하여 국내 임상 현장에서 적용할 근거를 마련하였고, 사전연구를 통하여 중심외보기 훈련의 가능성을 확인할 수 있었다.

인터넷상에 3차원 모델을 이용한 한-일간 실시간 수화 통신 시스템의 구축을 위한 기초적인 검토 (A Study on the Construction of a Real-time Sign-language Communication System between Korean and Japanese Using 3D Model on the Internet)

  • 김상운;오지영
    • 전자공학회논문지S
    • /
    • 제36S권7호
    • /
    • pp.71-80
    • /
    • 1999
  • 수화 통신은 이종 언어간의 통신 수단으로 사용될 수 있다. 이 논문에서는 3차원 모델을 이용하여 한-일간 수화 통신 시스템을 구현하여 그 가능성을 실험하였다. 실시간 통신을 위하여 통신 시스템을 클라이언트/서버 구조로 하였으며, 지적 통신방식을 도입하였다. 각 클라이언트에 3차원 모델을 준비하여 놓고, 실제의 수화영상 대신에 애니메이션 생성을 위한 파라미터 만을 전송하였다. 클라이언트에서 입력된 문장은 서버로 전송되어 한국 또는 일본 수화 파라미터로 변환한 다음 다시 클라이언트로 전송되어 수화 애니메이션으로 재생된다. 또한 자연스러운 수화 애니메이션을 위하여 감정 표현과 가변 프레임 방식 및 3차 스플라인 보간식을 이용하였다. 실험을 위한 통신 시스템은 윈도우 플랫폼에서 Visual $C^{++}$ 와 Open Inventor 라이브러리를 이용하여 구현하였다. 실험 결과 제안 시스템이 언어의 장벽을 넘을 수 있는 비언어 통신수단으로 이용될 수 있는 가능성을 보였다.

  • PDF

Effects of Injection Laryngoplasty with Hyaluronic Acid in Patients with Vocal Fold Paralysis

  • Kim, Geun-Hyo;Lee, Jae-Seok;Lee, Chang-Yoon;Lee, Yeon-Woo;Bae, In-Ho;Park, Hee-June;Lee, Byung-Joo;Kwon, Soon-Bok
    • Osong Public Health and Research Perspectives
    • /
    • 제9권6호
    • /
    • pp.354-361
    • /
    • 2018
  • Objectives: The purpose of this study was to explore the effects of injection laryngoplasty (IL) with hyaluronic acid in patients with vocal fold paralysis (VFP). Methods: A total of 50 patients with VFP participated in this study. Pre- and post-IL assessments were performed, which included analyzing the sustained vowel /a/ phonation, and the patient reading 1 Korean sentence from the "Walk" passage that comprised 25 syllables in 10 words. To investigate the effect of IL on vocal fold function, acoustic analysis (acoustic voice quality index, cepstral peak prominence, maximum phonation time, speaking fundamental frequency) was conducted and auditory-perceptual (grade and overall severity), visual judgment (gap), and self-questionnaire (voice handicap index-10) assessments were performed. Results: The patients with VFP showed statistically significant differences between pre-and post-IL assessments for acoustic and auditory-perception, visual judgment, and self-questionnaire assessments. Conclusion: The patients with VFP showed positive change in vocal fold function between pre- and post-IL measurements. The findings showed that IL with hyaluronic acid is an effective method to improve vocal fold function in patients with VFP.

대명사의 통사단서가 참조해결과정에 미치는 효과: 대명사의 수 단서와 성별 단서 (The Role of Syntactic Cues in Pronoun Referential Resolution: The Effects of Number Cue and Gender Cue)

  • 이재호
    • 인지과학
    • /
    • 제15권3호
    • /
    • pp.25-33
    • /
    • 2004
  • 이 연구는 대명사의 통사단서인 수단서와 성별단서가 참조해결에 미치는 효과를 다양한 과제에서 수렴적으로 관찰하였다. 실험 1은 자율조절 문장읽기과제와 어휘판단과제를 실시하였다. 복수 대명사는 단수 대명사에 비해서 읽기시간이 빨랐으며, 단수 대명사는 성별단서가 명료한 조건이 애매한 조건보다 읽기시간이 빨랐다. 실험 2는 실험글을 RSVP(rapid serial visual presentation)로 제시한 다음 선행어의 어휘판단과제를 실시하였다. 단수 대명사와 복수 대명사의 어휘판단시간은 통계적인 차이는 없었고, 단수 대명사는 성별단서가 명료한 조건이 애매한 조건보다 어휘판단시간이 발랐다. 대명사의 통사 단서는 참조해결의 과정에 강력한 영향을 미치는 제약임이 수렴적으로 확인되었다.

  • PDF

스트레칭과 PMT 적용에 따른 요통환자의 통증, 근력, 유연성의 변화 (Changes in Pain, Muscle Strength and Flexibility according to Pinch Lift and Rubbing Manual Therapy and Stretching Application for Low Back Pain)

  • 백윤웅;민순;이병훈;신명기
    • Journal of Korean Biological Nursing Science
    • /
    • 제16권1호
    • /
    • pp.1-7
    • /
    • 2014
  • Purpose: This research was implemented for men in their thirties who have lower back pain to observe general activity disorder patterns during pinch lift and rubbing manual therapy (PMT) and stretching application. Methods: Participants were divided into three groups: The PMT Group used applied pinch lift and rubbing manual therapy; the STR Group used applied stretching; and the CON Group was the control group. Participants for each group received treatments that were conducted three times a week for a total five weeks. Measures of pain utilized Visual Analogue Scale (VAS) [INCOMPLETE SENTENCE]. Results: There were significant differences between the PMT Group and the CON Group as well as the STR Group and the CON Group for pain, muscle strength and flexibility. There was a significant difference in pain between the PMT Group and the STR Group. Conclusion: As a result, it is inferred that PMT and stretching positively influenced recovery with regards to pain, muscle strength and flexibility relief; however PMT is more effective for pain relief than stretching.

알츠하이머 치매노인의 Apolipoprotein E 유전형에 따른 우울과 기억력의 상관관계 (Correlation between Depression and Memory According to Apolipoprotein E Genotype in Elderly with Alzheimer's Dementia)

  • 김광재;노동희;한승협;차윤준;감경윤
    • 한국산학기술학회논문지
    • /
    • 제21권1호
    • /
    • pp.477-486
    • /
    • 2020
  • 본 연구는 알츠하이머 치매노인을 대상으로 Apolipoprotein E (ApoE) ɛ4의 유무와 치매수준에 따른 우울과 기억력의 상관관계를 분석하고자 하였다. 임상치매척도(clinical dementia rating; CDR)가 0.5점에서 2점 사이인 65세 이상 노인 50명을 대상으로 임상치매척도, 노인용 서울언어학습검사, 레이 복합도형검사, 축약형 노인우울검사를 실시하였고 ApoE 유전자형은 구강상피세포를 채취하여 실시한 유전자 검사를 통해 확인하였다. 자료분석은 맨 휘트니 U 검정, 상관관계 분석을 실시하였다. ApoE ɛ4가 없는 경우에 CDR 1점과 2점에서 우울과 언어적 즉시회상 기억력이 유의한 음의 상관관계가 있었고(p<.05), ApoE ɛ4를 보유한 경우에는 CDR 1점에서 우울과 언어적 즉시회상, 언어적 지연회상 기억력에서 유의한 음의 상관관계가 있었다(p<.05). 우울과 언어적 즉시회상 기억력은 유의한 상관관계가 있었고 ApoE ɛ4를 보유한 경우에는 우울과 언어적 지연회상 기억력에도 유의한 상관관계가 있었다. 따라서 알츠하이머 치매의 예방 및 중재로 시각적인 훈련보다 언어적 기억력훈련이 유용할 것이며 우울치료가 상호보완적으로 도움을 줄 수 있을 것으로 기대한다.