• Journal of Korea Technology Innovation Society
• /
• v.13 no.1
• /
• pp.184-203
• /
• 2010

Based on the figure of Program's result, the measurement of National R&D Program efficiency cannot have reflected its characteristic. This study explores the way to integrate evaluators' recognition into program efficiency as a means of embodying its characteristic. As a way of integrating their recognition with evaluating efficiency, two methods are applied. One is AHP as for evaluators recognition and the other is DEA as for measuring efficiency. This study tries to show the effect of evaluators on program efficiency and compares the result with one which did not include their recognition. The study also implies that the recognition of evaluators should be considered when the program efficiency is measured. Furthermore, this study suggests that the participation and role of evaluators should be expanded into evaluation of program efficiency.

• Proceedings of the Korea Technology Innovation Society Conference
• /
• 2017.11a
• /
• pp.209-228
• /
• 2017

사회의 글로벌화와 다원화로 인한 행정수요가 다양화 되고 정책문제가 복잡해지면서 이를 해결하기 위한 부처 간의 협력이 강조되고 있다. 이에 따라 다부처연구개발사업(이하 다부처사업)의 수요가 확대되고 있는 상황에서, 실무적 측면의 다부처사업 추진체계 설계 및 평가를 위한 가이드라인이 필요하다. 이를 위해, 본 연구에서는 연구개발사업의 목적 및 내용에 따른 추진체계 평가방법을 개발하는 것을 목적으로 하였다. 본 연구에서는 추진체계의 효율성 평가를 위해 거래비용 개념을 도입한 평가방법론을 제안하였다. 추진체계를 도입함으로써 절감할 수 있는 거래비용과 발생하는 조직비용의 값을 비교하여 추진체계의 효율성을 분석할 수 있는 평가방법을 설계하였고, Williamson과 Coase의 이론을 도입하여 각 비용을 측정할 수 있는 대리지표를 도출하고 설문을 설계하였다. 전문가를 대상으로 델파이 조사를 진행하여 도출된 대리지표의 기획 평가 관점에 따른 가중치를 설정하였다. 제안한 평가방법의 적용 가능성을 검증하고 보완사항을 도출하고자 현재 추진되고 있는 4개의 다부처사업에 대한 사례연구를 수행하였다. 본 연구는 다부처사업의 추진체계의 효율성을 사전적 및 사후적으로 평가할 수 있는 방법을 제시하였다는 점에서 의의가 있다.

• Proceedings of the Technology Innovation Conference
• /
• 2009.02a
• /
• pp.649-662
• /
• 2009

일반적으로 기술평가는 무형의 기술을 대상으로 그 기술의 기술성, 사업성, 시장성을 검토하여 기술을 금액, 등급, 점수, 의견 등으로 표시하는 평가활동으로 정의할 수 있으며(Cordon, 1994), 평가목적에 따라 다양한 기술평가유형이 존재한다. 최근 기술의 사업화가 선진경제구현의 핵심 매커니즘으로 부상함(박종복, 2008)에 따라 성공적인 신기술 사업화의 선행절차로서 기술평가가 필요하다고 할 수 있다. 일반적으로 신기술의 사업화 관련 선행연구 및 그것을 추진하는 기관들은 기술의 기술성과 사업성을 중심으로 신기술을 평가하고 있다. 하지만, 현재까지의 신기술 사업화 목적의 기술평가와 관련한 선행연구는 기술성과 사업성의 균형 있게 평가하지 못하고 있다. 따라서 본 연구에서는 신기술의 평가를 위해 기술의 기술성과 사업성을 동시에 고려할 수 있는 기술평가지표를 개발하였다.

• Review of KIISC
• /
• v.12 no.2
• /
• pp.7-17
• /
• 2002

최근 급속도로 발전하고 있는 생체인식 분야는 상업적인 활성화와 이에 따른 사용자의 신뢰성 확보를 위해 서로 다른 생체인식 제품들의 상호호환성과 상호연동성을 고려하여 표준화된 생체인식 데이터 및 API에 대한 기술 개발을 하고 있다. 그리고, 사용자의 신뢰성 확보를 위해 생체인식 제품에 대한 성능 및 보안성 평가기술 개발을 위해 국내외에서 연구가 활발하게 진행되고 있다. 국외의 경우 ANSI, NIST, IBIA, EU, AfB, 등의 기관을 통해 생체인식 제품들에 대한 표준을 연구하고 있으며, BioAPI, BAPI, HA-API 등과 같은 기술표준과 보안기술표준인 X9.84 및 생체인식 데이터 형식에 대한 표준인 CBEFF를 발표하였다. 그리고, 독일의 GISA, 영국의 CESG와 NPL, 그리고 미국의 NIAP와 BFC 등은 생체인식제품에 대하여 성능평가 및 보안성 평가 연구를 추진 중에 있다. 국내의 경우 KSIA, KBA, TTA TC10/SG3, ETRI 등을 통하여 표준화 작업을 진행하고 있으며 KISA에서 국책과제인 'Biometric 인증시스템 보안성 평가기술 개발'을 통해 성능 및 보안성 평가기술을 개발하고 있다.

• Proceedings of the Korea Water Resources Association Conference
• /
• 2008.05a
• /
• pp.1423-1427
• /
• 2008

자연과 함께하는 하천복원기술개발에 관한 연구의 일환으로 호안평가기법을 개발하였는데 평가항목은 수리안정성, 생태성 및 어메니티로 구성되어 있다. 개발된 방법과 외국의 호안평가방법을 비교하기위하여 일본과 미국의 방법을 선택하였다. 세가지 방법들의 세부적인 평가항목들의 유사성은 많지 않았으며, 그 이유는 평가의 관점이 각각 상이하기 때문이다. 미국의 방법은 어메니티는 거의 고려하지 않았으며 일본의 방법은 호안구조물의 파괴에 초점을 맞춘 방법이다. 세가지방법의 평가항목을 수리적 안정성, 생태성 및 어메니티의 대항목을 분류하고 각 항목마다 몇 개의 소항목으로 구성하고 각 소항목마다 1점에서 5점까지 점수를 부여하였다. 점수가 낮을 수록 좋은 평가가 되도록 배정하였다. 광주천의 한지점의 조사결과를 각각의 방법에 맞춰 점수를 계산한 결과 연구팀의 방법은 2.19점, 미국방법은 2.71점, 일본의 방법은 2.11점으로 평가되었다. 평가항목의 중복성이 많지 않았지만 평가결과는 점수의 차이가 크지 않음을 알 수 있었다. 각 방법의 소항목들을 자세히 검토하여 연구팀의 평가방법을 보완하는 연구가 필요할 것이며 평가방법이 확립되면 기존호안을 평가하여 호안공사 우선순위를 정하는데 유용하게 이용될 수 있을 것이다.

• Proceedings of the Korea Technology Innovation Society Conference
• /
• 2017.11a
• /
• pp.289-303
• /
• 2017

기술력평가는 기술사업화 주체가 기술을 사용하여 수익을 창출할 수 있는 능력을 평가하기 위한 것으로, 국내 기술성 평가기관들이 각자 독자적인 평가 모형을 활용하여 평가를 수행해오고 있다. 특히 최근에 개발된 해양 및 수산 산업 분야의 기술력 평가모형은 타 산업 대비 열악한 기술개발 환경과 연구개발 성과를 대상으로 평가를 수행해오면서 기존의 평가체계 내에서는 많은 평가대상 기술들이 부적합 판정을 받아오고 있었다. 이러한 것은 기존 평가체계가 타 산업에서 활용되고 있는 공통적인 평가지표와 평가척도를 유사 또는 동일하게 사용하면서 발생되는 문제점으로 인식되었고, 또한 해양 및 수산 산업의 특수성이 반영되지 않은 평가체계에서 비롯된 것으로 파악되고 있다. 따라서 본 연구를 통해 기존 평가체계를 해양수산 산업의 특수성을 반영할 수 있는 평가체계로 개선하여 해당 산업에 특화될 수 있는 평가체계를 새롭게 제안하고자 하며, 이를 위해서 기존 평가지표의 개선, 시뮬레이션 기반의 평가척도의 재설정 방법과 평가등급 산출방법에 대한 새로운 제안을 하고자 한다. 마지막으로 개선된 기술력평가 체계를 활용하여 시범사례평가를 수행하여 기존 평가체계를 통한 평가결과의 Gap분석을 수행하고자 한다.

• 한국정보교육학회:학술대회논문집
• /
• 2004.01a
• /
• pp.358-365
• /
• 2004

현대 사회에서 개발되는 제품이나 시스템, 소프트웨어는 개발자 중심을 벗어나 사용자 중심으로 변화하고 있으며 개발 단계에서 사용자의 사용성이 중요한 요소로 대두되고 있다. 교육용 소프트웨어에 대한 평가는 교수전략, 내용, 기술적 특성 둥을 중심으로 이루어지고 있는데 이는 개발자나 평가주체의 관점으로 실시되고 있으며, 실제 교육용 소프트웨어를 최종 사용하게 될 학생 중심의 사용성 평가는 미비한 실정이다. 교육용 소프트웨어를 사용할 학습자에게 가장 편리하고 쉬운 사용성을 확보해 준다는 것은 중요하다. 이에 본 연구에서는 소프트웨어의 사용성 평가 기준, 웹 사이트의 평가 기준, 교육용 소프트웨어의 평가 기준을 분석하고 사용성의 평가요소를 추출하여 웹 기반 교육용 소프트웨어의 사용성 평가 기준을 제시하고자 한다.

• Journal of Korea Technology Innovation Society
• /
• v.11 no.4
• /
• pp.613-638
• /
• 2008

The Korean government established 'the Act on Performance Evaluation and Management for National Research & Development (R&D) Programs' in 2005, and one year later constructed a master plan, 'A Basic Plan for the Management and Utilization of R&D performance' that focused on better diffusing the public R&D outcomes. In this study we propose a model of performance monitoring, evaluation, and management system for national R&D, which is based on a systematic approach and the logic model that has been prevalently used in planning and evaluating the public programs, to meet the purpose of the law and the master plan as well as to facilitate the diffusion of national R&D outcomes focused mainly on the industrial application technology. Furthermore, in order to use the model for the several applications, the model's specific measures which includes the quantitative methodologies such as analytic hierarchy process (AHP) and data envelopment analysis (DEA) are suggested in accordance with the existing system of the evaluation institution in Korea.

• Information Systems Review
• /
• v.14 no.2
• /
• pp.117-140
• /
• 2012

It is hard, but important to evaluate and select a new service model for the public sector, accompanying unexpectable risk. The purpose of this study is to build and develop the evaluation framework of public projects and to present a project evaluation system which is more rational and methodical. The evaluation framework has been developed by calculating the evaluation criteria and weights resulted from an interview with an expert group and Analytic Hierarchy Process(AHP). Moreover, market-oriented characteristics, technology-oriented characteristics, service development capabilities and policy-oriented characteristics were predominantly chosen as the evaluation items. The re-evaluation of the app development support programs was conducted to check the feasibility as an evaluation system influencing the performance of firms. The result of an evaluation system proposed by this study showed better evaluation performance than previous ones, better predicting the actual business performance. Currently, though the policies of the public sectors and support programs focus on the outcome and performance management, the result of this study shows the importance of project selections. Also, implications of the study are discussed.

• Proceedings of the ESK Conference
• /
• 1998.04a
• /
• pp.76-80
• /
• 1998

디자인 개발시 사용자 참여의 중요성이 날로 증가하고 있는 것은 자명한 사실이다. 그중 사용성 평가에 서의 사용자의 참여는 비교적 활발한 상태이다. 하지만, 현재 기본적으로 행해지고 있는 렙에서의 사용 성 평가는 여러 가지 면에서 극히 제한적이며 비용이 많이 들고, 시간 또한 많이 소비된다. 또한 이러 한 평가는 광범위한 데이터의 수집과 빠른 피드백을 얻는 데 여러 가지 문제점을 가지고 있다. 우리가 사용성 평가에서 필요로 하는 것은 빠르고 정확한 피드백을 광범위하게 수집하여 디자인에 제공할 수 있는 방법이다. 본 연구에서는 디자인 개발에 있어 앞에서 설명한 빠르고 광범위한 사용자의 피드백을 얻기위한 방법으로 인터넷을 사용하여 사용자의 직접적인 참여-사용성 평가 등-가 가능하게 되었다는 것에 초점을 맞추었다. 사용성 평가를 위한 프로토 타이핑과 사용자의 문화적 배경과 성향을 가늠할 수 있는 질문들을 인터넷의 홈페이지에 올려 각각의 서로 다른 문화권에 속해 있는 사용자들이 제품 디자인 개발 과정에서 되는 사용자의 테스트 데이터를 원격 수집하여 디자인 평가/개발에 즉각적인 피드백을 제시하여 디자인 프로 세스에서의 사용자의 참여를 극대화 시킨다. 이렇게함으로써 상당한 분량의 상용성 평가를 단시간에 시행 하는 것이 가능하며 서로 다른 문화권에 속해있는 사용자의 관념적 특성과 사용형태의 현상적 특성을 밝히 고 이들간의 관계를 연계 분석하여 데이터의 질적인 향상또한 기대할 수 있을 것이다.