• 디지털융복합연구
• /
• 제16권5호
• /
• pp.239-245
• /
• 2018

지금까지 이러닝 소프트웨어 평가에 관한 다양한 연구가 진행되었으나 관련 표준에 따라 체계화된 형태가 아닌 연구자의 시각에서 제시된 분류에 따라 주관적인 평가 기준을 구성하고 있다. 또한 소프트웨어 평가 관련 표준도 실질적인 활용을 위해 지속적으로 보완되고 있으므로 이에 부합하는 평가 기준의 마련을 통해 평가 근거의 확보 및 체계화가 절실하다. 따라서 본 연구에서는 이러닝 소프트웨어의 품질평가 기준을 구축하기 위해 소프트웨어 제품평가 표준인 ISO/IEC 25000 시리즈의 품질특성 중 사용성에 관한 체계를 근간으로 하고 이러닝 소프트웨어의 품질 요구사항을 분석하고 체계화하여 사용성의 부특성에 따른 평가 기준을 구축하였다. 본 평가 기준은 지속적으로 변화하는 관련 최신 표준화 동향을 반영한 이러닝 소프트웨어 평가기준을 구축하여 실질적인 활용도를 제고했다는 점에서 차별화된다. 향후 이러닝 소프트웨어의 품질평가 및 인증에 효과적인 활용이 가능할 것으로 사료된다.

• 한국항해항만학회:학술대회논문집
• /
• 한국항해항만학회 2012년도 춘계학술대회
• /
• pp.57-58
• /
• 2012

위성항법중앙사무소는 다수의 DGNSS 기준국을 운영하고 있으며, 이 중 일부 기준국은 타 기준국에 비해 TEQC 품질평가 결과가 저조하다. 이에 이 연구는 TEQC 품질평가가 상대적으로 불량한 충주기준국을 대상으로 비교실험을 수행한다. 이전에 다른 관측장비를 이용하여 수행한 동시 관측에서는 TEQC 품질평가가 다른 기준국과 유사한 수준으로 나타나 지형이나 전파방해 등과 같은 주변 환경적인 요인은 아닌 것으로 확인하였다. 이번 충주비교실험은 기존 설치된 관측장비의 이상유무를 고려하여 크게 세 부분으로 나누어 진행한다. 안테나 이상판단은 기존 관측기기에 다른 기종의 안테나로 교체하여 확인하고, 수신기 이상 유무는 분배기를 이용하여 두 수신기에 동시 관측값을 기록하여 판단한다. 마지막으로 케이블의 경우, 상위 두 실험을 통해 수집된 관측자료의 품질평가를 통해 확인 가능하다. 이 연구를 통하여 TEQC 품질평가 저하요인을 확인하고 개선방안을 제시하여 양질의 DGNSS 정보를 제공할 수 있을 것으로 판단된다.

• 정보관리학회지
• /
• 제40권3호
• /
• pp.77-98
• /
• 2023

본 연구는 지금까지 제안된 거대언어모델 가운데 LLaMA 및 LLaMA 기반 모델과 같이 연구데이터를 주요 사전학습데이터로 활용한 모델의 데이터 품질에 중점을 두어 현재의 평가 기준을 분석하고 연구데이터의 관점에서 품질 평가 기준을 제안하였다. 이를 위해 데이터 품질 평가 요인 중 유효성, 기능성, 신뢰성을 중심으로 품질 평가를 논의하였으며, 거대언어모델의 특성 및 한계점을 이해하기 위해 LLaMA, Alpaca, Vicuna, ChatGPT 모델을 비교하였다. 현재 광범위하게 활용되는 거대언어모델의 평가 기준을 분석하기 위해 Holistic Evaluation for Language Models를 중심으로 평가 기준을 살펴본 후 한계점을 논의하였다. 이를 바탕으로 본 연구는 연구데이터를 주요 사전학습데이터로 활용한 거대언어모델을 대상으로 한 품질 평가 기준을 제시하고 추후 개발 방향을 논의하였으며, 이는 거대언어모델의 발전 방향을 위한 지식 기반을 제공하는데 의의를 갖는다.

• 디지털융복합연구
• /
• 제13권1호
• /
• pp.49-66
• /
• 2015

이러닝 산업에 대한 사회적인 관심의 증가는 민간 교육업체와 공공기관을 대상으로 하는 이러닝 콘텐츠 및 시스템 공급자의 증가로 이어지게 되었다. 이러닝이 다양한 분야에서 사용되어짐에 따라, 양질의 서비스를 제공하고 서비스의 신뢰성을 제고하기 위해서는 이러닝 콘텐츠와 시스템 및 그 공급자에 대한 평가 기준과 적합성에 대한 평가가 이루어져야 한다. 기존 연구들은 이러닝 품질인증에 대한 평가기준과 품질인증 평가기준의 세부 실행 방안은 제시하고 있으나, 품질인증 기술성에 대한 필요성과 기술성 평가기준은 제시하지 못하고 있다. 본 연구에서는 이러닝 콘텐츠의 품질인증 기술성 평가에 대한 목적과 필요성을 기술하고, 이러닝 콘텐츠 기술성 평가기준의 특징과 기술성 평가기준 세부 항목별 적용 절차 및 방법에 대해 기술한다. 본 연구를 통해서 이러닝 콘텐츠 기술성 평가기준의 세부적인 평가항목과 평가척도를 제시할 수 있고, 각 평가항목에 대한 평가척도의 예시를 제공함으로써 이러닝 콘텐츠의 품질인증 기술성 평가기준을 수립할 수 있다. 또한, 시범서비스가 이루어진 후, 이러닝 콘텐츠 품질인증 기술성 평가기준에 대한 결과의 피드백에 따라 기준을 보완하여 정책에 반영하고 고시한다면, 해당 정책은 산업계에서 활용할 수 있을 것으로 기대된다.

• 디지털콘텐츠
• /
• 1호통권92호
• /
• pp.60-73
• /
• 2001

이 연구서는 한국데이터베이스진흥센터의 표준화 연구과제의 일환으로 추진된 Database품질평가에 대한 연구로서 DB 및 콘텐츠의 품질평가에 대한 선행연구와 기준, 측정항목, 평가분석 등으로 나누어 서술하고 있으며, 본 연구서(80P분량)의 요약본입니다. 따라서 표의 순서도 원본의 번호에 따른 것이며 일부 내용과 각주의 첨삭이 있기 때문에 독자들의 주의를 요합니다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 2006년도 가을 학술발표논문집 Vol.33 No.2 (C)
• /
• pp.427-432
• /
• 2006

소프트웨어의 다양화로 인하여 하드웨어 형태의 보안 제품에서 소프트웨어 형 보안 제품으로 점차 변화하고 있는 중이다. 이러한 변화 속에서 소프트웨어 형 보안 제품의 품질을 평가하는 기준이 없어, 현재 ISO/IEC 9126 의 표준으로 소프트웨어 형 보안 제품을 평가하고 있는 것이 현실이다. 하지만 소프트웨어 형 보안 제품을, 기존 소프트웨어 품질 평가 기준으로 적용하기에는 한계가 있다. 지금까지 소프트웨어 제품의 평가 방법과 요구 사항에 대한 프로세스가 국제 표준으로 제정 및 정의되어 있으나, 소프트웨어 형 보안 제품의 경우, 이러한 국제 표준을 적용하여 제품을 평가하는 데는 어려움이 있다. 이에 본 논문에서는 현재 사용중인 소프트웨어 평가 기준 인ISO/IEC 9126-1에서 규정하고 있는 6개의 소프트웨어 품질특성 중 기능성 의 부 특성인 보안성의 매트릭스를 확인하고 ISO/IEC 15408(공통평가기준)의 내용 중 일부를 발췌 및 보완하여 기존 6가지의 소프트웨어 품질특성 중 기능성의 부특성인 보안성을 보완한, 새로운 보안성 품질 매트릭스를 제안한다.

• 한국컴퓨터정보학회논문지
• /
• 제18권9호
• /
• pp.63-70
• /
• 2013

게임의 멀티미디어 데이터는 그 품질에 따라 게임의 몰입에 영향을 준다. 예술적인 품질은 평가기준을 설계하기가 어렵지만 기술적인 관점에서 평가할 수 있는 부분에 대해서는 평가기준을 설계하는 것이 품질의 신뢰성과 객관성을 확보할 수 있다. 그러나 게임의 멀티미디어 데이터에 대한 품질평가 기준은 아직 설계된 것이 없다. 따라서 본 연구에서는 게임의 멀티미디어 데이터에 대한 품질평가 요소를 추출하고, 추출 요소에 대한 신뢰성을 검증하였다. 그리고 각 요소에 대한세부평가내용을 정의하고, 평가지표를 개발하였다. 본 연구의 결과는 고품질의게임 개발에 가이드 역할을 하며 게임산업의 성장에 긍정적인 영향을 줄 것으로 기대한다.

• 한국IT서비스학회:학술대회논문집
• /
• 한국IT서비스학회 2002년도 창립기념 학술대회
• /
• pp.147-151
• /
• 2002

최근 국내 SI 사업체들은 소프트웨어의 가치를 향상시키기 위해 컴포넌트를 적극 도입하고 있다. 그러나 컴포넌트 시장을 활성화 시키기 위해서는 다양한 범주의 고객이 요구하는 양질의 컴포넌트를 풍부하게 갖추고, 고객이 시스템을 직접 개발하는 것보다 적은 비용과 시간을 소모하면서도 시스템을 구축할 수는 환경을 조성해야 한다. 그러한 환경을 구축하기 위한 요소중 고객의 구매 결정과 직결되는 가장 중요한 항목은 컴포넌트의 기술적 가치와 비즈니스적 가치의 평가와 이를 위한 시험 기준이다. 객관적이고 공정한 시험 기준이 마련되지 않는 상태에서 품질 평가가 이루어 지지 못한다면, 잠재적 고객이 구매 또는 사용하고자 하는 컴포넌트가 적절한 가치를 갖고 있는 것인지 판단할 수 있는 근거가 없고 시장 형성 초기부터 불량 컴포넌트 제품이 공급됨으로 인해 신뢰성이 저하되어 컴포넌트를 구매하는 대신 다른 대안을 선택하려 할 것이다. 객관적이고, 유력한 품질 평가 시스템을 구축하기 위해서는 품질 시험 평가를 위한 기준 마련이 선결 조건이다. 품질 시험 평가 가이드라인은 고품질의 소프트웨어 컴포넌트의 생산을 가능하게 하여, 궁극적으로 소프트웨어의 신뢰도를 향상 시키는 가장 유력한 방안이 될 것이다. 이를 통해 컴포넌트 소프트웨어의 유통 촉진 및 시장 성장을 견인, 생산/개발-유통-사용에 이르는 전체 컴포넌트 산업의 완결된 서비스를 제공 할 수 있을 것이다. 본 연구에서는 이러한 기준 마련을 위한 메트릭을 제공한다.

• 한국도서관정보학회지
• /
• 제37권3호
• /
• pp.289-307
• /
• 2006

이 연구는 대학도서관에서 정리업무에 활용되고 있는 UNICAT의 품질에 대해 살펴보는데 목적이 있다. UNICAT의 품질 검증을 위해 검색성, 지원성, 편이성의 3 개 평가기준을 구분하였으며 각 기준을 확인하기 위한 평가항목을 개발하였다. 논의의 전개를 위해 평가기준 및 항목을 중심으로 하였으며 UNICAT에서 제공하는 기능들을 면밀히 분석하였다. UNICAT을 사용하고 있는 정리업무 담당자들의 견해를 수집하여 논의에 반영하려고 하였다. 평가결과를 토대로 문제점과 개선방안을 제시하였다. 이 연구는 향후 UNICAT의 품질관리를 위해 참조할 수 있을 것이며 분담편목체제를 활성화하는데도 기여할 것으로 기대된다.

• 한국품질경영학회:학술대회논문집
• /
• 한국품질경영학회 2010년도 춘계학술대회
• /
• pp.171-176
• /
• 2010

본 연구는 지금까지의 어떤 쇼핑몰 평가 시스템보다 쇼핑몰의 다양하고도 상호 유기적인 메커니즘을 조화롭게 평가할 수 있도록 하기 위해 경영품질의 공인된 세계 기준이자 많은 기업들에게 가장 신뢰할 수 있는 자기평가 기준이며 또한 시스템 경영의 교과서 역할을 하고 있는 말콤볼드리지 국가 품질상의 평가기준을 쇼핑몰에 도입하여, 리더십, 전략기획, 고객 및 시장, 정보와 분석, 인적자원, 프로세스의 여섯 가지 관점에서 쇼핑몰의 현황을 파악하고, 이를 측정하여 일곱 번째 관점인 최종 사업성과에 어떠한 영향을 미치는지를 분석함으로써, 웹사이트 성공에 영향을 미치는 정량적인 요소들과 정성적인 요인들에 대한 포괄적인 접근을 통해 쇼핑몰 사이트를 평가하고 분석하기 위한 종합적인 모형을 제시 하였다.