• Journal of Korea Technology Innovation Society
• /
• v.12 no.1
• /
• pp.113-136
• /
• 2009

The purpose of this study is to develop meta evaluating indicators for Defense R&D Programs in Korea. At first, the four components of this meta evaluation model were designed, which are evaluation context, evaluation input, evaluation process, evaluation output. And fifty two indicators were developed for this meta evaluation. Basic model of meta evaluation was derived from the literature review and brain storming. And this meta evaluation model was determined by adapting the result of experts who performed evaluations for Defense R&D Programs in recent years. Factor Analysis method was used to verify the validity of meta evaluation model. The survey of fifty three members turned out that Cronbach' ${\alpha}$ was over 0.6 in evaluation components and items. And the reliability of evaluation context was 0.877, that of evaluation input was 0.755, that of evaluation process was 0.755, that of evaluation output was 0.755 respectively. Analytic Hierarchy Process (AHP) method was used in assigning the evaluation weight. The survey of twenty two members showed that the Consistency Ratio was 0.09 in evaluation components and items.

• Korean Journal of Construction Engineering and Management
• /
• v.14 no.4
• /
• pp.118-129
• /
• 2013

Due to the recent surge in natural disasters, with rising social concerns, investment on research & development (R&D) project in natural disaster mitigation area is continuously increasing. However, current R&D performance management system of natural disaster mitigation area does not properly reflect characteristics and social ripple effects of R&D projects. It is indicated that mainly due to the current performance index consists of easy-quantification factors and the performance evaluation system adopts simple aggregation method. Therefore, the purpose of this study is to develop new performance evaluation system considering characteristics and social ripple effects of natural disaster mitigation R&D projects. To this ends, this study derived 3-dimensional performance measurement index through literature review and natural disaster mitigation R&D projects analysis. Finally, based on the derived performance measurement index, this study suggested new and effective performance evaluation system for natural disaster mitigation R&D projects.

• Proceedings of the Technology Innovation Conference
• /
• 1997.12a
• /
• pp.45-69
• /
• 1997

최근들어 환경변화가 가속화되고 기업의 환경적응성이 중요해짐에 따라 R&D 활동의 평가과정이 학습의 핵심적인 단계로서 새롭게 부각되고 있다. 또한 R&D 활동에서 결과 중심적 접근, 사업부와의 연계 등이 강조되면서 구체적 R&D 성과평가가 연구관리(R&D management)의 중요한 이슈가 되고있다. 그러나 그동안 R&D 성과평가는 R&D 활동 자체가 불확실성을 가지는 특성으로 인하여 체계적 접근이 이루어지지 못하여 왔으며 최근에 들어 R&D 성과평가 부문이 연구관리 및 기술경영분야의 도전적 연구과제가 되고 있다. 본 연구는 이러한 R&D 성과평가를 어떻게 접근할 것인지에 대한 접근방법과 성과 지표의 내용, 성과지표의 선택 및 개발절차, 향후 연구과제를 중심으로 제시한다. 본 연구의 세부내용은 다음과 같다. 첫째, 민간기업 연구개발활동의 성과평가에 적용가능한 평가의 분석틀(framework) 및 관점(perspective)을 제시하였다. 기존 평가모형에 대한 문헌고찰을 바탕으로 종합적, 체계적인 평가분석틀을 도출하고, 측정가능한 성과지표군을 제시하였다. 또한 성과지표들을 다양한 기준에 따라 분류하고 각 분류에 따라 적용가능한 성과지표군을 제시하였다. 둘째, 각 기업별 특성을 고려하고 경영전략과의 연계를 명확히 할 수 있는 구체적인 성과지표를 개발하기 위하여 4단계의 R&D 성과 평가지표 개발절차를 도출하였다. 셋째, 향후연구를 위한 성과평가 연구분야의 주요 연구과제들을 5가지로 정리하여 제시하였다.

• IE interfaces
• /
• v.8 no.3
• /
• pp.123-132
• /
• 1995

첨단생신시스템개발사업과 같은 국가전략으로 추진되는 개발사업에 있어서는, 핵심제품 및 신기술의 연구와 함께 개발성과에 대해 객관적이고 기술적인 평가시스템이 마련되어져야 한다. 본 연구는 이러한 평가시스템을 개발하기 위한 것으로써, 먼저 첨단생산시스템개발사업의 목표달성도를 주요하게 고려하여 평가대상을 시스템, 단위기계, 요소기술, S/W로 분류하고, 개발성과에 대한 평가항목으로 기술성, 신뢰성, 안전성, 경제성을 선정, 내용면에서 평가의 객관성을 보증하고자 하였다. 또한 형식적인 면에서는, 평가의 객관성 및 전문성을 보증하기 위하여 평가형태를 개발수행기업에 의한 자체평과와 위원회에 의한 위원회평가로 나누었으며, 위원회평가를 위해서는 평가자를 기술적으로 지원 할 수 있도록 개발사업에 대한 평가지원 DB시스템을 개발도록 하였다.

• Journal of Korea Technology Innovation Society
• /
• v.13 no.4
• /
• pp.794-816
• /
• 2010

To explore the answer on how the evaluators' network affects efficiency of National R&D Program, this paper analyzes the network of evaluators who attended the peer-review committee for National Nuclear R&D Program from 2007 to 2008. The result derived from network analysis was applied to measure the efficiency of programs by Data Envelopment Analysis. The result shows that the weaker network produces higher efficiency as much as the research result itself. Along with the expertise of evaluators themselves, this paper implies that network should be considered as a main item for evaluation.

• Journal of Korea Technology Innovation Society
• /
• v.18 no.4
• /
• pp.539-560
• /
• 2015

Korea has enacted the Performance Evaluation law on the R&D Programs since 2006. This study categorizes program size, program history, sustainability, self-evaluation result as antecedents, and analyze the relationship between the antecedents and Meta-evaluation result, the change rate of appropriations. The result shows that program size, program history, self-evaluation result have significant effect to the Meta-evaluation result. And Meta-evaluation result has significant effect to the change rate of appropriations. This study has implication that the performance evaluation system shows significant effect to the appropriations.

• Proceedings of the Korea Technology Innovation Society Conference
• /
• 2000.05a
• /
• pp.106-122
• /
• 2000

1999년 처음 출범한 연구회체제는 소속 연구기관들의 1999년도 연구실적 및 경영내용에 대한 기관평가를 실시하였다. 기관평가는 짧은 준비기간에도 불구하고 비교적 객관적인 지표체계 및 과학적인 평가방법을 개발하여 평가의 신뢰성과 타당성을 제고하려고 하였다. 그러나 연구회 소속 연구기관들은 기관평가시스템에 대한 재검토 필요성에 대부분이 공감하고 있는 실정이다. 이에 본 연구는 정부출연연구기관의 책임성 확보와 성과지향적인 관리 및 평가체제 구축을 위하여 도입된 기관평가의 목적, 대상, 체계, 기준 및 그 결과 등을 국가연구개발사업 조사·분석·평가와 비교분석하고, 그 개선방안을 제시하고자 한다.

• 한국HCI학회:학술대회논문집
• /
• 2008.02a
• /
• pp.292-297
• /
• 2008

유비쿼터스 컴퓨팅 서비스 환경은 사용자와 시스템간의 상호작용성이 매우 중요하며, 이러한 상호작용성을 사용자 중심의 시각에서 평가하기 위한 새로운 평가 기법의 개발이 필요하다. 본 연구는 유비쿼터스 서비스의 특성이 반영된 사용자 중심의 상호작용성 평가 metric 개발을 목표로 한다. 이를 위하여 첫째, 기존의 유비쿼터스 서비스 평가방법론을 검토하여, 유비쿼터스 서비스 평가를 위한 평가 속성을 정의하였으며, 둘째, 대인 서비스 평가기법, 사용성 평가기법, 정신측정학 기반의 평가기법 등의 기존의 서비스 평가방법론의 한계를 극복할 수 있는 사용자중심의 상호작용성 평가 metric 을 개발하였다. 그리고 본 연구에서 제안된 평가 metric 을 u-home 서비스의 평가에 실제로 적용하여 그 유효성을 검증하고 각 지표별 중요도를 구해보았다. 본 연구에서 제안한 상호작용성 평가 metric 은 유비쿼터스 서비스 상호작용성 수준을 평가함으로써 잠재 서비스 사용자들을 분석하고, 제안된 프레임워크의 서비스 개발단계에서의 잠재 서비스 사용자에 대한 요구사항 수렴 및 수준 파악에 유용하게 활용될 수 있다.

• Proceedings of the Korean Vacuum Society Conference
• /
• 2012.02a
• /
• pp.235-235
• /
• 2012

반도체/디스플레이 공정의 설치 layout의 단순화와 전체 공정 cost의 저감을 위하여 대용량, 고진공 성능의 진공시스템 수요가 증대되고 있다. 이로써 고진공 펌프 국산화의 일환으로 터보분자 펌프와 크라이오 펌프 개발이 진행 중이다. 개발 시제품의 최종 상용화 단계에 진입하기 위한 목적으로 핵심부품의 진공, 기계적 특성평가, 운전상태 및 진공 특성평가, 신뢰성 확보/공정대응성 평가를 위한 관련 기술 및 장치가 개발되었다. 본 연구에서는 터보분자펌프의 공정별 gas load 다변화에 따른 기계적 안정성과 작동 신뢰성의 확인을 위해 내구성 평가 장치를 설계/제작하였다. 상용화 제품의 성능 테스트를 통한 RPM, 소비전력, 압력 그리고 온도 등의 패턴을 확인하여 내구성 평가시스템의 신뢰성을 확인하고 터보분자펌프의 성능 특성 변화를 고찰하고자 한다. 본 연구는 지경부 산업원천기술개발사업 중 "초고진공펌프 개발" 사업의 제 3 세부과제인 "고진공펌프 종합특성평가시스템 개발(과제번호: 11201044)" 및 "스마트형 진공 배기 진단 제어 시스템 개발(과제번호: 11201038)" 과제에서 수행된 연구결과의 일부임.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 2009.11a
• /
• pp.123-126
• /
• 2009

본 연구는 만화표현학습을 통한 창의성개발을 목적으로 만화의 창의성 평가요소를 추출하였으며 이를 통하여 실험대상의 창의성을 측정하였다. 먼저 만화의 창의성 요소로 유창성, 융통성, 독창성, 정교성과 더불어 흥미성 요소를 추출하였으며 각 요소를 통하여 객관적인 창의성 평가를 얻기 위해 각 요소에 평가항목을 제시하였다. 이 후 1 차 실험은 실험대상의 4 컷 만화제작을 통해 본 연구에서 제시한 창의성 요소를 이용하여 평가 하였으며 기본적인 창의성 요소를 확인한 결과 수업 전의 창의성이 높은 요소는 유창성, 낮은 요소는 독창성을 들 수 있었다. 또한 1 차 실험 후 실험대상의 작품평가에 대한 창의성 결과에 대해 정교성과 흥미성의 요소를 더욱 개발하기 만화 표현학습이 이루어 졌으며 이후 2 차 실험이 이루어졌다. 2 차 실험 또한 4 컷 만화제작을 통하여 창의성 변화요인을 살펴 보았으며 만화학습 후의 창의성 개발요소 중 높은 요소는 정교성, 낮은 요소는 독창성의 결과가 나타났다. 연구 결과 창의성개발을 위한 본 연구의 만화표현학습이 실험대상의 창의성 변화에 대해 영향을 끼친 사실을 확인할 수 있었다.