• Journal of Korea Technology Innovation Society
• /
• v.20 no.2
• /
• pp.271-291
• /
• 2017

This study measures and compares the performance of research and development (R&D) programs in government-funded research institutes (GRIs) in terms of qualitative and quantitative approaches to find out strategic insights for improving performance evaluation policy. In particular, we adopt the evaluation results from the real data of K institute in 2015 for a qualitative evaluation and the results of data envelopment analysis (DEA) for a quantitative evaluation. Comparative analysis of the R&D performance of 14 programs finds that the difference between the evaluation results of qualitative and quantitative approaches is significant. From this finding, we suggest several strategic directions to complement two approaches each other.

• Proceedings of the KIEE Conference
• /
• 2005.11b
• /
• pp.43-45
• /
• 2005

우리나라 전력기술 수준의 평가는 전력기술 중장기 발전계획에 대한 기초자료로서 전력인프라의 투자, 연구개발정책의 수립, 예산배분의 기된 데이터로서 활용되고 있지만, 대부분의 기술수준 평가방법이 전문가 설문조사에 의한 정성적 평가에 그치고 있어 산업 현장의 데이터가 반영되는 데는 미흡한 점이 있었다. 된 논문에서는 이러한 단점을 보완하기 위해 전력기술전반의 수준 평가를 전력산업 각 부분의 계량지표를 관간으로 산출하는 방법에 의한 계량적인 기술평가를 시도하였다. 이 정량적 평가결과를 전문가의 정성적 평가결과 및 과학기술부 조사결과와 대비함으로써 그 차이를 논하고 향후 해석적인 기술평가를 위한 발전방향을 제시하였다.

• Proceedings of the Safety Management and Science Conference
• /
• 2012.11a
• /
• pp.369-376
• /
• 2012

본 연구는 소방대원의 화재진압 업무를 인간공학적 평가도구(RULA, REBA)를 이용하여 분석하고 타업종(병원, 자동차업종)과의 비교를 수행하였다. 첫째, 소방대원들의 업무 중 화재진압 업무의 인간공학적 작업자세 분석 및 평가하여 극단적인 작업자세에 대해서 살펴보았다. 요구조자 1인 운반법은 RULA, REBA의 평가결과에서 모두 정밀조사가 필요하고 즉시 개선 조치가 요구되는 4단계로 평가되었다. 둘째, 화재진압 업무와 타업종과(병원, 자동차업종)의 분석 결과를 비교 분석을 실시하였다. RULA로 평가한 결과 3, 4단계가 차지하는 비율이 72%로 자동차 업종(74%)에서의 평가결과 보다 낮게 나타났지만 병원업종(37%)보다는 높게 나타났다. REBA로 평가한 결과 3, 4단계가 차지하는 비율이 36%로 병원(9%)과 자동차 업종(24%)에서의 평가결과보다 높게 평가된 것으로 나타났다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2008.05a
• /
• pp.65-68
• /
• 2008

본 논문은 영한 과학기술 논문 자동번역 시스템을 대상으로 이루어진 수동 평가와 자동 평가 사이의 상관 관계를 밝힘으로써 수동 평가와 자동 평가 중에 한쪽의 방법에 의해서 평가가 이루어지더라도 다른 쪽의 수치를 파악할 수 있도록 하는데 목표가 있다. 본 논문에서 수행한 수동 평가는 5 인의 전문 번역가가 5 회에 걸쳐 평가한 결과이며, 자동 평가는 영어 원문 1,000 문장에 대한 8 인이 번역한 8,000 문장의 정답문(References)과 자동번역 결과를 어절 단위와 형태소 단위로 N-gram 비교를 통해 평가된 결과이다. 본 논문에서 도출된 식은 사용하는 평가 집합과 대상 번역 시스템 별로 자동 평가와 수동 평가 간의 상관 계수를 만들어내고 수동 번역률을 구하는 식을 동일하게 적용한다면 시스템의 자동 평가 결과로부터 성능을 직관적으로 해석하는데 상당히 도움이 될 것이다.

• Proceedings of the Korea Technology Innovation Society Conference
• /
• 2017.11a
• /
• pp.173-185
• /
• 2017

본 논문에서는 해양 및 수산 분야의 투자용 기술력평가모형 개발을 위하여 민간 VC투자 활성화를 위한 평가기법 선행조사를 수행하며, 국내 관련 전문기관 등의 기술투자 관련 기술력평가 모형개발과 활용수준 등을 조사하고, 해외 관련 전문기관의 기술평가모형 현황에 대한 조사·분석을 수행하였다. 또한 투자용 기술력평가 모형의 용도와 방향 설정을 위하여 국내 기술투자 관련 전문가 그룹을 활용하여 기술공급자와 수요자 관점에서의 견해를 반영한 투자모형의 용도와 방향설정을 제시하였다. 결과적으로 기술투자 목적의 평가요인을 도출하고, 기술투자자 입장의 평가결과 유효성 검증을 통해 평가결과의 실무적 활용성을 제고시키고자 한다. 기술보증기금에서 개발한 기존의 투자용 기술력평가 모형이 많은 타 기관에 파급되어 운영되고 있지만, 활용수준이 미미한 점을 검토하여 VC의 투자의사결정 요소에 관한 연구결과를 기반으로 해양수산분야 투자용 기술력평가 신규모형을 설계하였다.

• Journal of Korea Technology Innovation Society
• /
• v.12 no.1
• /
• pp.113-136
• /
• 2009

The purpose of this study is to develop meta evaluating indicators for Defense R&D Programs in Korea. At first, the four components of this meta evaluation model were designed, which are evaluation context, evaluation input, evaluation process, evaluation output. And fifty two indicators were developed for this meta evaluation. Basic model of meta evaluation was derived from the literature review and brain storming. And this meta evaluation model was determined by adapting the result of experts who performed evaluations for Defense R&D Programs in recent years. Factor Analysis method was used to verify the validity of meta evaluation model. The survey of fifty three members turned out that Cronbach' ${\alpha}$ was over 0.6 in evaluation components and items. And the reliability of evaluation context was 0.877, that of evaluation input was 0.755, that of evaluation process was 0.755, that of evaluation output was 0.755 respectively. Analytic Hierarchy Process (AHP) method was used in assigning the evaluation weight. The survey of twenty two members showed that the Consistency Ratio was 0.09 in evaluation components and items.

• The Journal of Korean Institute for Practical Engineering Education
• /
• v.4 no.1
• /
• pp.7-12
• /
• 2012

There are two ways in general for evaluating the accomplishments used by the universities, one is relative evaluation, the other is absolute evaluation. Recently, Korean universities have had the problem with score inflation due to absolute evaluation. The advantage of relative evaluation compared with absolute evaluation is for us to distinguish one's academic accomplishments from others. However, relative evaluation would lead to over-competition. Through this paper, I tired to analyze how cooperative learning influences the academic accomplishments under relative evaluation. Cooperative learning in the relative evaluation of student accomplishments conducted were divided into three groups. And analyzed a result and following presented about the research which in necessary.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2018.05a
• /
• pp.22-25
• /
• 2018

상용 벤치마크에 의한 PC 의 성능 평가는 다양한 측면의 성능 분석이 가능하지만 모든 벤치마크들이 동일한 성능 요소에 대하여 동일한 성능 평가 결과를 나타내는 것은 아니다. 벤치마크들은 각자의 특성에 따라서 사용자의 응용 프로그램의 활용 측면, 또는 하드웨어 구성요소 측면에서 서로 다른 방법으로 테스트를 수행하고, 그 결과를 컴퓨터의 성능으로 도출하도록 되어 있다. 본 연구에서는 응용 프로그램 사용자 측면에서 성능을 평가하는 벤치마크인 SYSmark 2014 와 PCMark 8, 그리고 Passmark PerformanceTest 9 를 서로 다른 CPU 사양을 가지는 PC 들에 대하여 실행하고, 그 결과를 분석함으로써 하드웨어 측면에서의 성능 평가 결과와 사용자 측면에서의 성능 평가 결과와의 연관성을 분석하였다. 벤치마크별로 성능 평가를 수행한 결과, SYSmark 2014 와 PCMark 8 은 CPU 사양에 따른 하드웨어 구성요소 측면에서의 변화에 대한 Passmark PerformanceTest 9 결과치의 차이에 비하여 상대적으로 적은 성능 차이를 보인다. 이러한 벤치마크 결과는 응용 프로그램이나 소프트웨어를 활용하는 사용자 측면에서의 성능이 하드웨어 측면에서의 성능 차이에 반드시 비례하는 결과를 나타내지는 않는다는 사실을 분석적으로 보여준다.

• Proceedings of the Korea Water Resources Association Conference
• /
• 2008.05a
• /
• pp.460-464
• /
• 2008

본 연구에서는 하천환경의 현재 상태를 진단할 수 있는 하천환경평가기법을 제시하고, 수원천을 평가하였다. 이를 위해 윤세의(2007)가 제시한 도시하천평가기법의 53개 평가항목 중 설문조사의 결과를 이용하여 중요도가 높은 하천환경 관련 항목을 선별하고, 이를 하천환경평가기법의 평가항목으로 사용하였다. 평가항목은 총 27개이고, 평가결과는 총괄지수, 특성지수, 부문지수, 항목지수와 평가등급으로 나타내었다. 수원천의 조사구간은 광교저수지 하류부에서 세류대교까지 약 6.0 km이었고, 총 39개의 구간에 대하여 하천환경평가기법과 도시하천평가기법의 평가지수를 비교하였다. 하천환경평가를 적용한 결과 수원천의 총괄지수는 $2.57{\sim}3.86$으로 나타났고, 하천특성 지수는 $2.20{\sim}2.95$, 생태환경 특성지수는 $1.91{\sim}4.02$로 나타났다. 또한 두 가지 평가기법에 대한 총괄지수와 특성지수의 평균등급은 동일하게 계산되었고, 부문지수 평균등급은 수로, 하상 등의 부문에서 등급변동이 나타났지만 2개 등급 이상의 차이를 보이지 않았다. 이러한 평가결과를 통해 도시하천 평가기법으로부터 파생된 하천환경평가기법의 적용가능성은 확인하였다. 앞으로 많은 대상하천을 선정, 평가를 실시하고, 하천의 연속성과 평가인자들 간의 연계성 등을 반영하는 부분에 대한 연구가 더 필요하다.

• Proceedings of the Korea Water Resources Association Conference
• /
• 2023.05a
• /
• pp.204-204
• /
• 2023

2020년 상수도 통계에 따르면 전국 상수도 보급률은 약 99% 정도로 높은 수치를 기록하고 있으나 노후관으로 인한 관로파손 및 수질사고로 인해 효과적인 운영에는 많은 어려움이 존재한다. 이러한 문제를 해결하기 위해 기술진단 및 정밀안전진단 등 체계적인 유지관리 규정이 도입되었으며 적용되고 있으며, 이때 시스템의 정량적인 성능평가를 위해 간접평가와 직접평가로 구성된 점수평가법이 적용되었다. 간접평가는 지중에 매설된 관로를 대상으로 매설연도, 관경, 관로연장 등의 노후도인자를 통해 관의 노후도를 추정하고 간접평가 결과 3등급으로 판명되는 관로의 경우 객관적인 관의 상태를 평가하기 위해 시편채취 및 관로 내시진단 등의 직접평가가 수행된다. 하지만 관로의 직접평가는 간접평가결과 3등급의 모든 관로에 대해 수행하기에는 진단비용 및 시간 등 제약조건에 따라 모든 지점에 대한 직접평가 수행에는 한계가 있다. 따라서, 본 연구에서는 이러한 관로 성능평가 기법의 한계를 개선하기 위해 상수도시스템 통합평가 기술을 개발하였다. 개발한 기술은 머신러닝 기법을 적용하여 간접평가 및 직접평가 결과를 토대로 직접평가가 필요한 지점의 결과를 예측하였다. 이를 바탕으로 상수도시스템 평가성능 향상 및 보강 우선순위 선정 단계에서 의사결정권자의 판단에 도움이 될 것으로 판단된다.