• Journal of Internet of Things and Convergence
• /
• v.5 no.2
• /
• pp.15-20
• /
• 2019

As the machine learning research has developed, the field of translation and image analysis such as optical character recognition has made great progress. However, video translation that combines these two is slower than previous developments. In this paper, we develop an image translator that combines existing OCR technology and translation technology and verify its effectiveness. Before developing, we presented what functions are needed to implement this system and how to implement them, and then tested their performance. With the application program developed through this paper, users can access translation more conveniently, and also can contribute to ensuring the convenience provided in any environment.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2022.11a
• /
• pp.258-261
• /
• 2022

최근 딥러닝 기술이 발전하면서 이미지를 설명하는 캡션을 생성하는 모델 또한 발전하였다. 하지만 기존 이미지 캡션 모델은 대다수 영어로 구현되어있어 영어로 캡션을 생성하게 된다. 따라서 한국어 캡션을 생성하기 위해서는 영어 이미지 캡션 결과를 한국어로 번역하는 과정이 필요하다는 문제가 있다. 이에 본 연구에서는 기존의 이미지 캡션 모델을 이용하여 한국어 캡션을 직접 생성하는 모델을 만들고자 한다. 이를 위해 이미지 캡션 모델 중 잘 알려진 Show, Attend and Tell 모델을 이용하였다. 학습에는 MS-COCO 데이터의 한국어 캡션 데이터셋을 이용하였다. 한국어 형태소 분석기를 이용하여 토큰을 만들고 캡션 모델을 재학습하여 한국어 캡션을 생성할 수 있었다. 만들어진 한국어 이미지 캡션 모델은 BLEU 스코어를 사용하여 평가하였다. 이때 BLEU 스코어를 사용하여 생성된 한국어 캡션과 영어 캡션의 성능을 평가함에 있어서 언어의 차이에 인한 결과 차이가 발생할 수 있으므로, 영어 이미지 캡션 생성 모델의 출력을 한국어로 번역하여 같은 언어로 모델을 평가한 후 최종 성능을 비교하였다. 평가 결과 한국어 이미지 캡션 생성 모델이 영어 이미지 캡션 생성 모델을 한국어로 번역한 결과보다 좋은 BLEU 스코어를 갖는 것을 확인할 수 있었다.

• Annual Conference on Human and Language Technology
• /
• 2023.10a
• /
• pp.603-608
• /
• 2023

본 연구는 한국어 Vision-Language Pre-training 모델 학습을 위한 대규모 시각-언어 멀티모달 데이터셋 구축에 대한 필요성을 연구한다. 현재, 한국어 시각-언어 멀티모달 데이터셋은 부족하며, 양질의 데이터 획득이 어려운 상황이다. 따라서, 본 연구에서는 기계 번역을 활용하여 외국어(영문) 시각-언어 데이터를 한국어로 번역하고 이를 기반으로 생성형 AI를 활용한 데이터셋 구축 방법론을 제안한다. 우리는 다양한 캡션 생성 방법 중, ChatGPT를 활용하여 자연스럽고 고품질의 한국어 캡션을 자동으로 생성하기 위한 새로운 방법을 제안한다. 이를 통해 기존의 기계 번역 방법보다 더 나은 캡션 품질을 보장할 수 있으며, 여러가지 번역 결과를 앙상블하여 멀티모달 데이터셋을 효과적으로 구축하는데 활용한다. 뿐만 아니라, 본 연구에서는 의미론적 유사도 기반 평가 방식인 캡션 투영 일치도(Caption Projection Consistency) 소개하고, 다양한 번역 시스템 간의 영-한 캡션 투영 성능을 비교하며 이를 평가하는 기준을 제시한다. 최종적으로, 본 연구는 ChatGPT를 이용한 한국어 멀티모달 이미지-텍스트 멀티모달 데이터셋 구축을 위한 새로운 방법론을 제시하며, 대표적인 기계 번역기들보다 우수한 영한 캡션 투영 성능을 증명한다. 이를 통해, 우리의 연구는 부족한 High-Quality 한국어 데이터 셋을 자동으로 대량 구축할 수 있는 방향을 보여주며, 이 방법을 통해 딥러닝 기반 한국어 Vision-Language Pre-training 모델의 성능 향상에 기여할 것으로 기대한다.

• Annual Conference on Human and Language Technology
• /
• 2018.10a
• /
• pp.389-393
• /
• 2018

딥러닝의 발달로 기계번역, 대화 시스템 등의 자연언어처리 분야가 크게 발전하였다. 딥러닝 모델의 성능을 향상시키기 위해서는 많은 데이터가 필요하다. 그러나 많은 데이터를 수집하기 위해서는 많은 시간과 노력이 소요된다. 본 연구에서는 이미지 생성 모델로 좋은 성능을 보이고 있는 생성적 적대 네트워크(Generative adverasarial network)를 문장 생성에 적용해본다. 본 연구에서는 긍/부정 조건에 따른 문장을 자동 생성하기 위해 SeqGAN 모델을 수정하여 사용한다. 그리고 분류기를 포함한 SeqGAN이 긍/부정 감성인식 학습데이터를 자동 생성할 수 있는지 실험한다. 실험을 수행한 결과, 분류기를 포함한 SeqGAN 모델이 생성한 문장과 학습데이터를 혼용하여 학습할 경우 실제 학습데이터만 학습 시킨 경우보다 좋은 정확도를 보였다.

• Journal of the Daesoon Academy of Sciences
• /
• v.36
• /
• pp.201-225
• /
• 2020

In the late Joseon Dynasty, ideas in folk religions were closely related to Daoist themes. There were, for instance, folk ideas centered on Prophecies of Jeong Gam (鄭鑑錄 jeonggamrok) that developed into 'raising island-armies (海島起兵說 hado gibyeongseol),' the future utopian movement known as the 'South Joseon Faith (南朝鮮信仰 namjoseon sinang),' and faith around 'Maitreya's Descensionist-Birth (彌勒下生 mireuk hasaeng).' People aimed to transform their country based on these ideas. Associated folklore tended to come from fengshui (風水) and books on prophecies and divination (圖讖 docham), and both of these drew heavily upon Daoist concepts. On the other hand, Daoist texts began being translated as national projects under King Cheoljong (哲宗), and many more were translated and published later under King Gojong (高宗). The nature of these Daoist texts mostly consisted of either morality books (善書 seonseo) or precious scrolls (寶卷 bogeon). The problem was that these ordinances and the Daoist texts of regents were among the main causes of civil war during the Qing Dynasty. In this regard, the translation of the Daoist texts conducted as a national project provided a theoretical basis for the people wishing to foment civil war or transformation. This raises the question of why King Gojong implemented a Daoist translation project in his nation. In an effort to answer this question, this article summarizes the popular ideas of the late Joseon Dynasty and explains how they were closely related to Daoism. In addition, this article summarizes the facts about how Daoism has emerged from a national crisis but developed a function of protecting the state (鎭護) in Korean history. Further described is the situation under which Daoism was summoned during the Japanese Invasion of Joseon (壬辰倭亂). Analysis is provided to show that King Gojong's intention was to translate Daoism due to Daoism's role in protecting the state. In addition, the relationship between current Daoist rites and customs in Korea and King Gojong's dissemination of Daoist oaths and vouchers is confirmed.

• Korean Journal of Heritage: History & Science
• /
• v.47 no.4
• /
• pp.136-161
• /
• 2014

This paper investigates the Buddhist sculpture and wall-painting enshrined in the halls of Bunhwangsa (Bunhwang temple) at Gyeongju in the mid-Silla period, which are thoroughly unknown to us except through textual records of Samgukyusa compiled by Priest Ilyeon in the late thirteenth century. According to Samgukyusa, a clay portrait-sculpture of Monk Wonhyo, made by his son Seolchong, was placed in Bunhwangsa. This image faced to the side, because he turned his body toward Seolchong when Seolchong bowed to this image. This story suggests that the portrait image of Wonhyo was most likely made after the Vimalakirti images, which were popular in China from the Six Dynasties period on, especially the Vimalakirti images of the early Tang period, turning his head and body toward Bodhisattva Manjusi seated opposite. The Vimalakirti image of Seokkuram might show the portrait image of Wonhyo. A wall-painting of a Thousand-Armed Avalokiresvara who has a thousand arms with a thousand eyes, called by the name 'Great Mercy with a Thousand Hands', was enshrined on the north wall of the left hall of Bunhwangsa. During King Gyeondeok's reign, Himyeong and her five-year-old blind child prayed before this image, and the blind child gained eyesight. While praying, they sang a song pleading for one of the thousand eyes which the Bodhisattva had in his hands. This song implies that Thousand-Armed Avalokiresvara had a thousand eyes, one painted on each hand. The fact that Thousand-Armed Avalokiresvara of Bunhwangsa was called 'Great Mercy with a Thousand Hands' indicates that this painting was based on the scripture Thousand-Armed Avalokiresvara Sutra translated by Bhagavaddharma in about 655, in the Tang period, which also has 'Great Mercy' in its title. In the year 755, a gilt bronze image of Medicine Buddha was made in Bunhwangsa, using nearly 61 tons of bronze to cast. The huge amount of bronze suggests it includes not only the Buddha statue but many other images such as two attendant Bodhisattvas of Suryaprabha and Candraprabha, Eight Great Bodhisattvas, or Twelve Guardians. Seven images of Medicine Buddha might have been made in accordance with the scriptural text of Seven Medicine Buddha Sutra translated by Monk Yijing. Textual evidence and recent excavation have revealed that seven images of Medicine Buddha and their whole attendant images based on Seven Medicine Buddha Sutra were made in the Nara period from 751 to 762 when Queen Gomyo contructed Sinyakusiji temple for the recovery of her husband Shomu. It is fair to assume that one or seven Medicine Buddhas and a whole group of his (their) attendant images were made for the main hall of Bunhwangsa temple in 755.