메타평가를 적용한 국가 연구개발 사업 평가시스템의 효율성 분석 모형 개발

The Design of Model for Analysis Efficiency of the National R&D Program Evaluation System by applying Meta Evaluation

정부는 '국가 연구개발 사업 등의 성과평가 및 성과관리에 관한 법률'을 제정하여 국가연구개발 사업성과의 효율성과 생산성을 제고하기 위하여 노력하고 있다. 본 연구는 범정부적인 차원에서 수행하고 있는 국가 연구개발 사업 평가시스템 중 특정평가에 대하여 메타평가방법을 통한 효율성을 분석하기 위한 평가모형 및 지표를 개발한 결과이다. 국가 연구개발 사업 평가시스템의 효율성 분석을 위한 베타평가 모형은 평가 상황 요소, 평가자원요소, 평가수행요소, 평가결과요소, 평가활용요소 등 5개 구성요소로 구분하여 평가지표를 개발하였다. 아울러 평가항목을 선정하기 위하여 분석한 평가구성요소 및 평가지표에 대한 신뢰성 검증결과 Cronbach' $\alpha$ 계수가 0.933으로서 평가지표체계는 큰 무리가 없는 것으로 나타났다. 그리고 평가구성요소 및 평가지표별 가중치 산정은 계층분석기법을 사용하여 분석하였다. 분석결과 조사자의 전체 일관성 지수는 0.1 미만으로 나타나 조사자의 일관성이 있는 것으로 분석되었다.

The Government is putting efforts to enhance efficiency and productivity of performances of National R&D Programs by enacting 'Law on Evaluation and Management of Performances of National R&D Program'. This study is the result of development of evaluation model and indices for analysis of efficiency through meta evaluation method for the specific evaluation among evaluation systems for National R&D Program that are being carried out at government-wide level. Meta evaluation model for analysis of efficiency of evaluation system for National R&D Program designed evaluation indices by categorizing compositional factors into 5 categories, namely, evaluation context factor, evaluation resources factor, evaluation process factor, evaluation result factor and evaluation utilization factor. Furthermore, the result of verification of reliability on evaluation composition factors and evaluation indices analyzed to select evaluation items displayed Cronbach' $\alpha$ coefficient of 0.933, thereby illustrating that there is no major problem in the evaluation index system. In addition, computation of weight for each evaluation composition factor and evaluation index was analyzed by using analytical hierarchy process (AHP) technique. The result of analysis displayed overall consistency index of less than 0.1 for the investigators, thereby enabling analysis that there is consistency in investigators.