DOI QR코드

DOI QR Code

Qualitative Analysis of Research Papers of KIGAM World Class Laboratories (WCL) Candidates

논문 질적평가를 통한 KIGAM 세계수준 후보연구실 기술수준 평가

  • Ahn, Eun-Young (Korea Institute of Geoscience and Mineral Resources (KIGAM))
  • Received : 2014.04.25
  • Accepted : 2014.05.29
  • Published : 2014.06.28

Abstract

For technology level assessment of KIGAM World Class Laboratories (WCL) candidates, bibliometric and qualitative analysis was conducted on their research papers listed on the SCIE database during 2009-2012. For the six research areas of geoscience and mineral resources, a research excellence indicator was applied using a Modified Rank Normalized Impact Factor (mrnIF), which was introduced by Heo et al. (2008) and Cho (2013). The KIGAM research department in rare metals utilization had the highest score for Impact Factor (IF) per paper in 2012 but the groundwater department or the exploration geophysics department came first based on the position and the mrnIF. Applying the mrnIF, the KIGAM research department in groundwater achieved excellent results in 2009 and 2011 and the urban mine department or exploration geophysics department came first place in other years. In the groundwater area, the percentage of research papers over 80 or 90 mrnIF, using Cho (2013)'s research excellence index, was the highest in 2011. The Cho (2013)'s excellent research indicator, 20%, the ratio of over 90 mrnIF was matched in the urban mining area for the whole research period, 2009-2012, and in the groundwater area for several years except 2010. Qualitative analysis of research papers can show the technology level of research departments. KIGAM World Class Laboratories (WCL) candidates should focus on increasing the quality and the quantity of their research papers.

본 연구에서는 지질자원 분야 연구개발 수월성을 제시할 수 있는 평가방법인 계량서지학(Bibliometrics)의 SCI논문 분석을 통해 질적평가 지표를 제시하고, 이를 KIGAM의 6개 세계수준 후보 연구실의 기술수준 분석에 적용했다. Heo et al. (2008), Cho (2013)에서 제시되었던 표준화된 순위보정 영향력 지수(mrnIF)를 연구수월성 지표로 활용하였다. 2012년 편당 IF는 희유자원활용 분야 KIGAM 연구실이 가장 높았으나 순위(position) 지수 및 표준화된 순위보정 영향력 지수(mrnIF)는 지하수(최고순위 적용 position/mrnIF), 자원탐사개발(평균순위 적용 position/mrnIF) 분야가 제일 높게 나타났다. 시계열 분석 결과 표준화된 순위보정 영향력 지수(mrnIF)는 지하수 분야 연구실이 2009년, 2011년 실적이 월등이 좋으나 타년도의 경우 도시광산 및 자원탐사개발 분야 연구실이 우수한 실적을 보이는 것을 알 수 있다. 수월성 지표로 전체 게재논문 중 표준화된 순위보정 영향력 지수(mrnIF)가 80 이상인 비율 및 90 이상인 비율로 비교한 결과, 2011년의 경우 지하수 분야 연구실이 가장 우수하였으나 다른 연도의 경우 지표별로 다른 순위를 보여 가장 우수하다고 보기 어려웠다. Cho (2013)의 최고등급 연구수월성 지표인 90 이상 논문 비율 20% 이상을 도시광산 분야 연구실이 만족하고 있으며 지하수 분야 연구실은 평균순위를 적용한 2010년을 제외하고 만족하고 있었다. 이와 같이 양적인 논문 수 뿐 만 아니라 논문의 질적 분석을 통해 해당 연구실의 기술수준을 비교할 수 있었다. 세계 수준의 연구실이 되기 위해서는 양적인 SCI 논문 수의 확대 뿐 만 아니라 논문의 질적 향상을 위해 노력해야 할 것이다.

Keywords

References

  1. Cho, Y.D. (2013) Qualitative outcome index for different R&D goals and its application, First public hearing document for improvement of R&D outcome evaluation method, MSIP/KISTEP, p.23-34.
  2. Cho, Y.H., Woo, J.P., and Song, C.H. (2010) Practical analysis of developed bibliometric indicators for evaluation of national R&D programs-case study of World Class University program-, Journal of Korea Technology Innovation Society, v.13, n.3, p.494-512.
  3. Heo, J.E., Kim, H.D., Cho, Y.D., Cho, S.M. and Cho, S.R. (2008) Developing Bibliometric Indicators for Analysis & Evaluation of National R&D Programs, Journal of Korea Technology Innovation Society, v.11, n.3, p.376-399.
  4. Kim, Y.J. and Lee, H.G. (2012) Analysis of Relationship Between international joint research and research paper quality using Relatively Rank-normalized Impact Factor (R2nIF), Proceeding of Korea Technology Innovation Society, p.75-84.
  5. Marshakova-Shaikevich, I. (1996) The Standard Impact Factor as an Evaluation Tool of Science and Scientific Journals, Scientometric, v.25, p.283-290.
  6. Ministry of Science, ICT, and Future Planning (MSIP) (2013) First public hearing document for improvement of R&D outcome evaluation method, MSIP/KISTEP, 48p.
  7. Pudovkin, A.I. and Garfield, E. (2004) Rank-Normalized Impact Factor: A Way to Compare Journal Performance Across Subject Categories, Proceedings of the 67th ASIS&T Annual Meeting, 41, p.507-515.
  8. Sen, B.K. (1992) Normalized Impact Factor, Journal of Documentation, 48, p.318-329. https://doi.org/10.1108/eb026901