• 정보관리학회지
• /
• 제36권4호
• /
• pp.129-159
• /
• 2019

본 연구의 목적은 연구데이터 서비스 자체의 유용성과 연구데이터에 대한 사용경험 기반의 유용성 측면에서 평가 모형을 개발하는 것이다. 다양한 사례에서 도출한 데이터 서비스의 유용성 평가 요소로부터 연구데이터에 내재된 평가척도인 검색성, 접근성, 상호운용성, 재활용성 4개와 각각의 측정지표 총 20개를 도출하였다. 그리고 Google Analytics, YouTube 광고료 책정 기준, 서울특별시, Altmetrics의 사례를 분석하여 연구데이터에 대한 이용자 경험 기반의 유용성 측정지표 12개를 도출하였다. 평가척도와 측정지표에 대한 타당성과 신뢰성 검정을 위해 연구데이터의 잠재적 이용자 164명을 대상으로 설문조사를 실시하였다. 평가척도의 타당성 검정을 위해 KMO Bartlett 분석을 하였으며, 측정지표의 성분분석을 위해 주성분 분석과 베리맥스 회전분석법을 사용하였다. 내재적 평가척도의 경우 4개 척도 모두 KMO Bartlett의 타당성 값을 충족시켰으며, 평가척도에 대한 측정지표의 성분분석 결과 모두 단일 성분으로 나타나 현재의 척도로 해당 지표에 대한 설명이 가능하였다. 그러나 이용자 경험 기반의 12개 측정지표의 성분분석 결과는 2개 성분으로 나누어지는 것으로 나타나 각각을 활용도와 참여도라는 개념의 2개 평가척도로 구분하였다. Cronbach's alpha 계수에 의한 신뢰도 측정 결과 6개의 평가척도 모두 0.6 이상의 측정치를 충족시키는 것으로 나타났다.

• 한국정보과학회논문지:정보통신
• /
• 제41권4호
• /
• pp.151-166
• /
• 2014

기존의 QoE(Quality of Experience) 측정 방식은 서비스 제공 서버에서부터 사용자가 서비스를 받는 단말기 까지 전체 구간을 묶어 측정 하였다. 이는 단순히 QoE 품질의 좋고 나쁨만을 판단할 수 있었으며 QoE 품질이 나빠질 경우 해결 방안을 제시 할 수 없었다. 또한 QoE 지표가 무수히 많기 때문에 어떻게 사용해야 하는 국제적 규정이 없다. 본 논문은 QoE 지표를 네트워크와 사용자 관점에서 분석하여 서비스를 제공하는 서버부터 라우터 까지, 라우터에서 서비스 받는 단말기 까지, 서비스 라우터에서 사용자 라우터 까지 3부분으로 나누고 각각의 영역에 맞는 QoE 지표 프레임을 제시한다. 이를 통하여 KOREN-CERNET 환경에서 QoE 네트워크를 설계 및 구현하고 QoE 네트워크의 안정성, 사용자 불만해결 시간 단축, 네트워크 변화에 따른 컨텐츠 적응 효과를 입증하였다.

• 한국수자원학회:학술대회논문집
• /
• 한국수자원학회 2015년도 학술발표회
• /
• pp.506-506
• /
• 2015

수문자료는 국가적으로 중요한 자료로서 이에 대한 품질관리가 반드시 필요하다. 이에 우리나라 국토교통부에서는 국가 수문자료 품질관리시스템을 구축하여 실시간으로 수집되는 수문자료의 품질을 관리하고 있다. 국가 수문자료 품질관리시스템에서 사용되는 수문자료 자동점검기준은 실시간으로 수집되는 수문자료의 상태를 구분하기 위한 점검방법에서 설정한 기준 값을 말하며, 특히 수문자료의 오류 추출을 자동화하는데 핵심적인 역할을 하는 값이다. 해당 값은 점검 방법에 따라 다른 형태를 갖고 있으며, 관측소의 관측특성과 밀접한 연관이 있어 실무에서는 기존 관측자료의 통계적인 특성을 이용해 초기값을 추정하고 이후 관측자료들에 대한 실제 품질 판정을 기준으로 실제 상황을 고려하여 주기적으로 관리자가 수작업에 의해 시행착오법으로 보정하는 방법을 사용하고 있다. 이에 본 논문에서는 국가 수문자료 품질관리시스템에서 활용하고 있는 수문자료 자동점검기준을 대상으로 기존에 수작업으로 진행되던 자동점검기준의 보정을 자동화할 수 있는 평가지표와 평가 알고리즘을 개발하였으며, 이를 실제 자료에 적용하였다. 개발된 알고리즘은 그림1과 같은 추정 이상치 집합과 실제 이상치 집합의 상관관계를 이용하여 두 집합의 교집합인 A를 증가시키는 구조이다. 이를 이용해 자동점검기준의 적중률을 향상시킬 수 있었으며, 향후 실무에 적용될 경우 수문자료 자동점검기준을 신속하고 적절하게 보정함으로써 수문자료 품질관리업무의 효율성을 향상시킬 수 있을 것으로 기대된다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 2010년도 한국컴퓨터종합학술대회논문집 Vol.37 No.1(C)
• /
• pp.105-108
• /
• 2010

쌍방향으로 질문과 답변을 하는 커뮤니티 기반의 지식검색서비스에서는 질의를 통해 원하는 답변을 얻을 수 있지만, 수많은 사용자들이 참여함에 따라 방대한 문서 속에서 검증된 문서를 찾아내는 것은 점점 더 어려워지고 있다. 지식검색서비스에서 기존 연구는 사용자들이 생성한 데이터 즉 추천수, 조회수 등의 비텍스트 정보를 이용하거나 답변의 길이, 자료첨부, 연결어 등의 텍스트 정보 이용하여 전문가를 식별하거나 문서의 품질을 평가하고, 이를 검색에 반영하여 검색성능을 향상시키는 데 활용했다. 그러나 비텍스트 정보는 질의/응답의 초기에 사용자들에 의해 충분한 정보를 확보할 수 없는 단점이 제기 되며, 텍스트 정보는 전체의 문서를 답변의 길이, 자료 첨부등과 같은 일부요인으로 판단해야하기 때문에 품질평가의 한계가 있다고 볼 수 있겠다. 본 논문에서는 이러한 비텍스트 정보와 텍스트 정보의 문제점을 개선하기 위한 품질평가 알고리즘을 제안한다. 제안된 알고리즘을 통한 품질지수는 텍스트/비텍스트 정보와 소셜 네트워크 사용자 중앙성을 고려하여 질문에 적합하고 신뢰성 있는 답변을 랭킹화 함으로써 지식검색문서를 분별하는 지표가 되며, 이는 지식검색서비스의 성능향상에 기여를 할 수 있을 것으로 기대된다.

• 한국산림과학회지
• /
• 제109권3호
• /
• pp.350-360
• /
• 2020

본 연구는 효율적인 숲가꾸기 사업 모니터링을 위해 숲가꾸기 사업의 작업종별 평가지표의 중요도를 선정하고 이를 적용한 숲가꾸기 사업 평가지표 개발 연구이다. 숲가꾸기 사업의 작업종별 중요도를 산정하기 위하여 Delphi와 AHP를 이용한 전문가 합의를 총 3차례에 걸쳐 진행하였으며, 선정된 사업추진 프로세스 4개 항목(계획 및 설계, 관리·감독, 감리, 작업품질)과 평가 항목 10개를 선정하여 중요도를 산정하였다. 분석결과, 사업추진 프로세스에서는 계획 및 설계가 가장 중요한 숲가꾸기 평가인자로 선정되었으며 관리·감독, 감리, 작업 품질 순으로 중요도가 산정되었다. 최종 종합 가중치 산정결과, 평가 항목별 우선순위에서는 "산림경영계획서 작성의 적절성" 이 가장 중요도가 높은 것으로 사료되었다. 또한 숲가꾸기 사업과 어린나무 가꾸기 사업에서는 "설계서 작성의 적정성", 조림지 가꾸기와 큰나무 가꾸기 사업에서는 "작업 품질"이 숲가꾸기 평가에 있어 중요한 인자로 나타났다. 본 연구 결과에 따르면, 숲가꾸기 계획 및 설계, 산림경영계획서 작성, 설계서 작성의 적정성 등 숲가꾸기 사업을 위한 설계 및 계획단계에서의 성과가 숲가꾸기 사업의 평가에 있어 많은 영향을 미치는 것으로 사료된다.

• 한국식품과학회지
• /
• 제36권3호
• /
• pp.423-431
• /
• 2004

시판 액젓류에 대해 객관적이고 과학적인 품질평가방법 및 품질 표준화를 위한 기초자료를 제시하고자 현재 시중에 시판되고 있는 멸치액젓 19종과 까나리액젓 23종에 대하여 이화학적 및 관능적 특성을 분석하여 품질을 파악하고, 액젓류의 관능적 특성과 품질지표와의 상관성을 비교 검토하였다. 수분의 경우 멸치액젓은 규격에 적합한 것으로 나타났으나 까나리액젓은 1종이 수산전통식품 품목별 품질기준을 초과하였다. 식염 농도의 경우 일부 제품에서 높은 식염함량을 나타내 국내 품질규격에 적합하지 않는 고식염 제품들이 제조되고 있음을 알수 있었다. pH, 회분, 비중, 순추출물, 휘발성염기질소, 총질소 및 아미노산질소함량은 제조회사별로 다양하게 나타나 품질에 상당한 차이를 보였으며 이들 중 총질소 및 아미노산질소함량이 식품공전규격이나 수산전통식품 품목별 품질기준에 미달인 제품이 멸치액젓 2종, 까나리액젓 3종이었으며, 멸치액젓에 국한한 한국산업규격인 총질소 1.2% 이상에 미달인 제품은 모두 4종으로 나타나 품질에 상당한 차이가 있는 것으로 나타났다. 관능검사와의 상관관계에서 현재 규격기준인 총질소와 아미노산질소 및 비중, 순추출물, 고형분, 휘발성염기질소가 상관성이 큰 것으로 나타나 품질평가 기준의 지표로 활용 가능할 것으로 판단된다.

• 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
• /
• 한국정보과학회언어공학연구회 2023년도 제35회 한글 및 한국어 정보처리 학술대회
• /
• pp.228-233
• /
• 2023

인간의 수동 평가 시 시간과 비용의 소모, 주석자 간의 의견 불일치, 평가 결과의 품질 등 불가피한 한계가 발생한다. 본 논문에서는 맥락을 고려하고 긴 문장 입출력이 가능한 ChatGPT를 활용한 한국어 요약문 평가가 인간 평가를 대체하거나 보조하는 것이 가능한가에 대해 살펴보았다. 이를 위해 ChatGPT가 생성한 요약문에 정량적 평가와 정성적 평가를 진행하였으며 정량적 지표로 BERTScore, 정성적 지표로는 일관성, 관련성, 문법성, 유창성을 사용하였다. 평가 결과 ChatGPT4의 경우 인간 수동 평가를 보조할 수 있는 가능성이 있음을 확인하였다. ChatGPT가 영어 기반으로 학습된 모델임을 고려하여 오류 발견 성능을 검증하고자 한국어 오류 요약문으로 추가 평가를 진행하였다. 그 결과 ChatGPT3.5와 ChatGPT4의 오류 요약 평가 성능은 불안정하여 인간을 보조하기에는 아직 어려움이 있음을 확인하였다.

• 디지털콘텐츠학회 논문지
• /
• 제15권1호
• /
• pp.45-52
• /
• 2014

모든 의료정보시스템에는 이해관계자와 환경이 존재한다. 의료정보시스템 개발 시에는 이 같은 환경에서 사용자의 기능적 요구사항과 비기능적 요구사항인 품질을 만족시켜야할 목표가 있다. 이 목표를 달성하기 위하여 현재 다양한 방법으로 정보시스템 개발이 이루어지고 있고 다양한 애플리케이션이 등장하고 있다. 그러나 이 같은 의료정보시스템 개발의 과정에서 기본적인 요구조건을 만족하고 있는지는 별도의 관점에서 고찰하지 않으면 안 된다. 본 연구는 유-헬스케어 서비스 소프트웨어아키텍쳐 품질확보를 위한 요구사항 분석방법을 제안한다. 의료정보시스템의 요구사항 분석을 통해 소프트웨어아키텍처 품질평가 사항과 의료정보서비스 품질평가 연계지표 평가방식을 제안했다. 이 방법은 연계성 팩터의 품질 합계치를 산출하고 그 추이를 분석하므로서 유-헬스케어 소프트웨어아키텍쳐에 대한 종합평가가 가능하게 한다. 품질평가는 요구사항 분석에서 도출된 목표와 비교하여 달성도를 분석하며 만족도 수준이 미진한 분야를 발췌하여 원인분석 및 개선작업에 활용이 가능하다.

• 한국식품조리과학회지
• /
• 제21권4호
• /
• pp.440-446
• /
• 2005

본 연구에서는 제조과정에서 조미액즙이 첨가된 저염명란젓갈을 $10^{\circ}C$에 저장하면서 화학적, 미생물학적 및 관능적 특성 변화를 종합적으로 평가하여 명란젓갈의 유통기한 예측을 위한 품질지표를 설정하고자 하였다. 명란젓갈의 숙성 중 젖산 생성량의 변화는 저장 7일까지는 서서히 증가하다가 7일 이후에 급격히 증가한 후 거의 일정하게 유지되었으며, 19일에 다시 증가하였다. pH의 변화는 젖산 생성량과 반대 경향을 보였다. 아미노태 질소는 숙성 10일까지 일정수준을 유지하다가 그 후에 증가하여 숙성 17일에 최고 값을 나타낸 후 다시 감소하였다. 휘발성 염기질소량은 숙성 5일 이후부터 급격하게 증가하여 저장 19일에는 $30mg\%$ 이상으로 나타났다. 미생물시험에서 분변대장균은 전 실험기간동안 검출되지 않았고, 일반 세균수와 내염성균수는 초기에는 각각 $1.5\times10^3$과 $5.5\tiems10^3 CFU/g$였고, 저장 17일까지 일반 세균수와 내염성균수가 $10^7CFU/g$을 유지하였다. 본 실험에 제공된 시료는 조미액 첨가와 알루미늄 밀봉 포장방식으로 인하여 외관상 알의 표면에 효모군락이나 곰팡이가 발생되지 않아 외관 특성이 명란젓갈의 품질 지표가 되지 못한 반면, 입안에서 명란알의 입자감이 중요한 품질 지표가 되는 것으로 나타났다. 저장 17일까지는 명란젓갈의 관능특성과 기호도가 초기제품과 비교시 유의적 차이가 없었다. 이러한 실험결과를 토대로 명란젓갈이 발효식품임을 감안해 볼 때 제품의 상업적 품질이 유지되는 유통기간은 제품의 관능평가에서 입자감과 종합적 기호도가 초기 제품과 유의적 차이(p<0.05)가 없는 상태로, 휘발성염기질소량은 $30mg\%$이하, 내염성미생물수는 $1.0\times10^8CFU/g$미만으로 각각 설정하였다.

• 대한전기학회:학술대회논문집
• /
• 대한전기학회 2006년도 제37회 하계학술대회 논문집 A
• /
• pp.478-479
• /
• 2006

배전계통의 전기품질을 평가하기 위한 중요한 요소는 여러 가지가 있으며 그 대표적인 요소로 신뢰도 지수를 들 수 있다. 신뢰도 지수란 정전이 수용가에 미치는 영향을 정전시간과 정전수용가수로 표현한 지표로 공급에 대한 비신뢰도율을 나타낸다. IEEE 위원회는 다양한 지역을 벤치마킹하여 신뢰도 지수를 정의하였다. SAIFI와 SAIDI 등과 같이 공통적으로 사용 중인 지수가 있으며 지역의 특성에 따라 다양한 지수가 사용되고 있다. 이 논문에서는 IEEE에 정의된 전기품질 신뢰도 지수의 현황을 분석하고 국내에서 사용 중인 신뢰도 지수와 상호 비교하였다.