• 제목/요약/키워드: corpus study

검색결과 685건 처리시간 0.025초

병렬 말뭉치 필터링을 적용한 Filter-mBART기반 기계번역 연구 (Filter-mBART Based Neural Machine Translation Using Parallel Corpus Filtering)

  • 문현석;박찬준;어수경;박정배;임희석
    • 한국융합학회논문지
    • /
    • 제12권5호
    • /
    • pp.1-7
    • /
    • 2021
  • 최신 기계번역 연구 동향을 살펴보면 대용량의 단일말뭉치를 통해 모델의 사전학습을 거친 후 병렬 말뭉치로 미세조정을 진행한다. 많은 연구에서 사전학습 단계에 이용되는 데이터의 양을 늘리는 추세이나, 기계번역 성능 향상을 위해 반드시 데이터의 양을 늘려야 한다고는 보기 어렵다. 본 연구에서는 병렬 말뭉치 필터링을 활용한 mBART 모델 기반의 실험을 통해, 더 적은 양의 데이터라도 고품질의 데이터라면 더 좋은 기계번역 성능을 낼 수 있음을 보인다. 실험결과 병렬 말뭉치 필터링을 거친 사전학습모델이 그렇지 않은 모델보다 더 좋은 성능을 보였다. 본 실험결과를 통해 데이터의 양보다 데이터의 질을 고려하는 것이 중요함을 보이고, 해당 프로세스를 통해 추후 말뭉치 구축에 있어 하나의 가이드라인으로 활용될 수 있음을 보였다.

외국어로서의 한국어 음성 코퍼스 구축과 이를 통한 외국인의 한국어 음성${\cdot}$음운체계 습득 양상 연구 (Speech Corpus for Korean as a Foreign Language and the Aspects of the Foreign Learners' Acquisition of the Phonetic and Phonological Systems in the Korean Language)

  • 이석재;김정아;장재응
    • 대한음성학회:학술대회논문집
    • /
    • 대한음성학회 2005년도 춘계 학술대회 발표논문집
    • /
    • pp.29-33
    • /
    • 2005
  • This study aims to establish a speech corpus for Korean as a foreign language (L2 Korean Speech Corpus, L2KSC) and to examine the aspects of the foreign learners acquisition of the phonetic and phonological systems in the Korean Language. In the first year of this project, L2KSC will be established through the process of reading list organizing, recording, and slicing, and the second year includes an in-depth study of the aspects of foreign learners Korean acquisition and a contrastive analysis of phonetic and phonological systems. The expectation is that this project will provide significant bases for a variety of fields such as Korean education, academic research, and technological development of phonetic information.

  • PDF

Ovarian Activity of Dromedary (Single Humped) Camel (Camelus dromedarius) in North-Eastern Nigeria

  • Yahaya, M.S.;Takahashi, J.;Matsuoka, S.;Alaku, O.
    • Asian-Australasian Journal of Animal Sciences
    • /
    • 제12권6호
    • /
    • pp.868-870
    • /
    • 1999
  • A total of 69 ovaries were collected from 345 camels slaughtered in Maiduguri abattoir, North-Eastern part of Nigeria, to study the influence of season on ovary weight and corpus luteum count in the dromedary (single humped) camel (Camelus dromedaries). Right ovary was significantly heavier (p<0.01) and had more follicular fluid than the left. Although corpus luteum count increased gradually throughout the study period, no camel had 3 active corpora lutea and only 53 out of the total number had two. Ovarian activity seem to be higher in the cold dry harmattan season, November/December, than during the warmer post rainy season, September/October. These periods can be exploited by farmers, especially peasants who rely heavily on natural mating, to obtain greater conception rates and reduce the chance of failure during mating.

Morphologic Assessment of Corpus Callosum in the Patient of Alzheimer Disease using Magnetic Resonance Imaging

  • Seoung, Youl-Hun;Choe, Bo-Young
    • 한국자기공명학회논문지
    • /
    • 제13권2호
    • /
    • pp.84-95
    • /
    • 2009
  • The purpose of this study was to evaluate the usefulness of the measurement of corpus callosum (CC) size in the Alzheimer patient by using magnetic resonance (MR) midsagittal image. We performed MR scanning in 20 normal high age group, and in 20 mild cognitive impairment (MCI) group, and in 20 Alzheimer disease (AD) group. The following parameters were employed in AD group: TRITE/FA 6650ms/66ms/$90^{\circ}$, NEX 2, Thickness/Gap 2/0, FOV 220mm. The magnetic field strength was used at 3.0 Tesla. We selected midsagittal image of the brain by using view forum program, measured CC size, which were anteroposterior length, diameter of genu, body, narrowing portion, and splenium. The present study demonstrates that CC size of Alzheimer disease can be useful for clinical assessment concerning the diameter of genu, body, and splenium.

자유 발화 자료에 나타난 {그래가지고}의 접속 부사화 (A Study on the Lexicalization of {Geuraegajigo} Based on the Spontaneous Speech Corpus)

  • 하영우;신지영
    • 한국어학
    • /
    • 제64권
    • /
    • pp.195-223
    • /
    • 2014
  • The aim of this paper is to study the morphemization of {Geuraegajigo} based on a spontaneous speech corpus. For this purpose, the distributions, the semantic functions, and the intonational phrase pattterns of the connective {Geuraegajigo} have been analyzed based on the corpus. The results are as follow; at first, coalescence that comes with a morphemization process was found, resulting in many variations. Secondly, there are three functions of it: [Direct/Indirect interrelationship], [Enumerate conjunction], and [Discourse marker]. And this semantic/functional diversity has many similarities with conjunctive adverbs. Lastly, intonational phrase patterns of {Geuraegajigo} accord with those of conjunctive adverbs. Especially, the discourse strategic IP pattern is connected with the short variation type. In conclusion, {Geuraegajigo} has finished turning into a conjunctive adverb through morphemization.

KONG-DB: 웹 상의 어휘 사전을 활용한 한국 소설 지명 DB, 검색 및 시각화 시스템 (KONG-DB: Korean Novel Geo-name DB & Search and Visualization System Using Dictionary from the Web)

  • 박성희
    • 정보관리학회지
    • /
    • 제33권3호
    • /
    • pp.321-343
    • /
    • 2016
  • 본 연구의 목적은 1) 소설 속 지명 데이터베이스(DB)를 구축하고, 2) 확장 가능한 지명 DB를 위해 자동으로 지명을 추출하여 데이터베이스를 갱신하며, 3) 데이터베이스 내의 소설지명과 용례를 검색하고 시각화하는 파일럿시스템을 구현하는 데 있다. 특히, 학습자료(training)에 해당하는 말뭉치(corpus)를 확보하기 어려운, 소설지명과 같이 현재 잘 쓰이지 않는 개체명을 자동으로 추출하는 것은 매우 어려운 문제이다. 효과적인 지명 정보 추출용 학습자료 말뭉치 확보 문제를 해결하기 위해 본 논문에서는 이미 수작업으로 구축된 웹 지식(어휘사전)을 활용하여 학습에 필요한 충분한 양의 학습말뭉치를 확보하는 방안을 적용하였다. 이렇게 확보된 학습용 코퍼스와 학습된 자동추출 모듈을 가지고, 새로운 지명 용례를 찾아 추가하는 지명 데이터베이스 확장 도구를 만들었으며, 소설지명을 지도 위에 시각화하는 시스템을 설계하였다. 또한, 시범시스템을 구현함으로써 실험적으로 그 타당성을 입증하였다. 끝으로, 현재 시스템의 보완점을 제시하였다.

텍스트마이닝을 위한 패션 속성 분류체계 및 말뭉치 웹사전 구축 (Development of Online Fashion Thesaurus and Taxonomy for Text Mining)

  • 장세윤;김하연;김송미;최우진;정진;이유리
    • 한국의류학회지
    • /
    • 제46권6호
    • /
    • pp.1142-1160
    • /
    • 2022
  • Text data plays a significant role in understanding and analyzing trends in consumer, business, and social sectors. For text analysis, there must be a corpus that reflects specific domain knowledge. However, in the field of fashion, the professional corpus is insufficient. This study aims to develop a taxonomy and thesaurus that considers the specialty of fashion products. To this end, about 100,000 fashion vocabulary terms were collected by crawling text data from WSGN, Pantone, and online platforms; text subsequently was extracted through preprocessing with Python. The taxonomy was composed of items, silhouettes, details, styles, colors, textiles, and patterns/prints, which are seven attributes of clothes. The corpus was completed through processing synonyms of terms from fashion books such as dictionaries. Finally, 10,294 vocabulary words, including 1,956 standard Korean words, were classified in the taxonomy. All data was then developed into a web dictionary system. Quantitative and qualitative performance tests of the results were conducted through expert reviews. The performance of the thesaurus also was verified by comparing the results of text mining analysis through the previously developed corpus. This study contributes to achieving a text data standard and enables meaningful results of text mining analysis in the fashion field.

인공신경망 기계번역에서 말뭉치 간의 균형성을 고려한 성능 향상 연구 (A study on performance improvement considering the balance between corpus in Neural Machine Translation)

  • 박찬준;박기남;문현석;어수경;임희석
    • 한국융합학회논문지
    • /
    • 제12권5호
    • /
    • pp.23-29
    • /
    • 2021
  • 최근 딥러닝 기반 자연언어처리 연구들은 다양한 출처의 대용량 데이터들을 함께 학습하여 성능을 올리고자 하는 연구들을 진행하고 있다. 그러나 다양한 출처의 데이터를 하나로 합쳐서 학습시키는 방법론은 성능 향상을 막게 될 가능성이 존재한다. 기계번역의 경우 병렬말뭉치 간의 번역투(의역, 직역), 어체(구어체, 문어체, 격식체 등), 도메인 등의 차이로 인하여 데이터 편차가 발생하게 되는데 이러한 말뭉치들을 하나로 합쳐서 학습을 시키게 되면 성능의 악영향을 미칠 수 있다. 이에 본 논문은 기계번역에서 병렬말뭉치 간의 균형성을 고려한 Corpus Weight Balance (CWB) 학습 방법론을 제안한다. 실험결과 말뭉치 간의 균형성을 고려한 모델이 그렇지 않은 모델보다 더 좋은 성능을 보였다. 더불어 단일 말뭉치로도 고품질의 병렬 말뭉치를 구축할 수 있는 휴먼번역 시장과의 상생이 가능한 말뭉치 구축 프로세스를 추가로 제안한다.

이하두정방사선사진과 측모두부방사선사진상에서의 계측치 상호연관성에 관한연구 (A STUDY ON THE CORRELATIONSHIP OF SUBMENTOVERTEX VIEW AND LATERAL CEPHALOGRAM MEASUREMENTS)

  • 조재형;유영규
    • 대한치과교정학회지
    • /
    • 제26권4호
    • /
    • pp.414-420
    • /
    • 1996
  • 방사선 사진상에서의 계측치 자체가 이차원적인 면만을 나타낼수밖에 없어 실제 삼차원적인 구조물인 두개안면부위의 특징을 정확히 묘사하기는 어려움이 있다. 이에 따라 한 평면과 다른 평면을 연계시켜 보다 3차원적인 측면의 많은 연구가 시행되어져 왔으며, 이들 두 평면간의 상호연관성에도 관심이 모아지고 있다. 본 연구에서는 부정교합과 밀접한 영향을 가질뿐 아니라, 성장의 변화를 예측할수 있게하고 치료방법,예후 결정등에 중요한 영향을 미치는 안모유형지수와 이하두정 방사선 사진상에서의 여러 계측치간의 상호연관성을 평가하여 보았다. 골격성 ClassI의 양호한 안모를 가진 성인을 대상으로 측모두부방사선사진 이하 두정 방사선계측사진을 촬영하여 이들간의 상관관계를 알아보아 다음과 같은 결론을 얻었다. 1. 과두의 평균경사도에 영향을 주는 요소를 알아보기 위해 FACE,INT-CO-ANG, MN-CORPUS, CON-RATIO, GON-RATIO, MN-RATIO, MX-RATIO를 변수로하여 다중회귀분석 결과, 아래의 회귀 방정식을 얻었다. CON-AVE는 .173(FACE) -0.322 (INT-CO-ANG) +36.34 (GON-RATIO)+0.420(MN-CORPUS)로 나타났다($R^2=.85451$) 2. 안모유형지수에 대해선 아래의 희귀방정식을 얻었다. FACE=.050(CON-ANG)+.023(INT-CO-ANG)-.075(MN-CORPUS) ( 2. 안모유형지수에 대해선 아래의 희귀방정식을 얻었다. FACE=.050(CON-ANG)+.023(INT-CO-ANG)-.075(MN-CORPUS) ($R^2=.31547$) 3. 이하두정 방사선사진상의 계측치들중 MN-CORPUS, CON-RATIO, GON-RATIO, MN-RATIO, MX-RATIO는 서로 밀접한 상관관계를 보였다.(P<0.05) 4. 하악과두의 평균경사도는 우측에선 $23.67^{\circ}$, 좌측에선 $20.71^{\circ}$로 나타났고, 좌,우측값에서 차이를 보이고 있다. FACE : 안모 유형지수. CON-ANG : 하악과두경사도의 평균값. CON-AVE : 좌,우 하악파두경사도의 평균값. INT-CO-ANG : 좌,우 하악과두장축이 이루는 각도. MN-CORPUS : 좌,우Gonion에서 Pog.까지 이은 선에 의해 형성되는 각도. CON-RATIO: intercondylar distance/mandibular body length. GON-RATIO: intergonion distance/mandibular body length. MN-RATIO : intermylohyoid distance/mandibular body length. MX-RATIO: intermaxillary tuberosity distance/ANS-PNS distance.

  • PDF

A Corpus-based study on the Effects of Gender on Voiceless Fricatives in American English

  • Yoon, Tae-Jin
    • 말소리와 음성과학
    • /
    • 제7권1호
    • /
    • pp.117-124
    • /
    • 2015
  • This paper investigates the acoustic characteristics of English fricatives in the TIMIT corpus, with a special focus on the role of gender in rendering fricatives in American English. The TIMIT database includes 630 talkers and 2342 different sentences, comprising over five hours of speech. Acoustic analyses are conducted in the domain of spectral and temporal properties by treating gender as an independent factor. The results of acoustic analyses revealed that the most acoustic properties of voiceless sibilants turned out to be different between male and female speakers, but those of voiceless non-sibilants did not show differences. A classification experiment using linear discriminant analysis (LDA) revealed that 85.73% of voiceless fricatives are correctly classified. The sibilants are 88.61% correctly classified, whereas the non-sibilants are only 57.91% correctly classified. The majority of the errors are from the misclassification of /ɵ/ as [f]. The average accuracy of gender classification is 77.67%. Most of the inaccuracy results are from the classification of female speakers in non-sibilants. The results are accounted for by resorting to biological differences as well as macro-social factors. The paper contributes to the understanding of the role of gender in a large-scale speech corpus.