• 제목/요약/키워드: 학술지 평가지표

검색결과 153건 처리시간 0.027초

의학학술지 평가지표의 변별력 측정연구 (An Analysis of the Discriminating Power of Medical Journal Evaluation Criteria)

  • 이춘실
    • 한국비블리아학회지
    • /
    • 제14권1호
    • /
    • pp.199-218
    • /
    • 2003
  • 본 연구에서는 대한의학학술지편집인협의회가 1997년부터 1999년 사이에 평가한 76종의 국내 의학학술지가 받은 총 33개 평가항목의 각 항목별 평가점수와 총평점의 분포, 그리고 이들의 상관관계를 분석하여 각 평가지표의 변별력을 측정하였다. 한국 의학학술지의 대표적인(변별력이 높은) 평가지표는 투고논문의 상호심사와 관련된 평가항목과, 학술지가 일정한 형식으로 일관성 있게 잘 만들어지고 있는지를 평가하는 항목으로 판명되었다. 논문상호심사제도(peer review system)가 학술지의 질관리에 있어서 매우 중요하다는 것은 주지의 사실이다. 학술지의 철저한 편집(quality of editorial work)과 출판품질 관리(production quality)가 학술지 평가의 좋은 척도가 될 수 있다는 것은 학술지 평가사업의 경제성과 효율성의 측면에서 매우 고무적인 일이다. 편집인 교체빈도나 연간 발행회수 등은 변별력이 거의 없는 평가지표로 나타났다. 평가대상 학술지가 우리나라 의학도서관에 비치되어 있는 정도나 권말색인 작성여부 등 변별력이 낮은 평가항목의 변별력을 높이기 위해서는 평가방법의 개선이 필요하며, 자체학술지 인용비율, SCI 인용빈도나 영향력지표 등의 평가항목은 평가배점 구간의 조정이 필요한 것으로 나타났다. SCI에서의 인용과 국제 데이터베이스 등재여부만이 아니라, 국내 학술지가 인용하는 빈도나 영향력지표, 국내에서 구축되고 있는 의학관련 데이터베이스 등재 여부, 레코드 입력율 등의 새로운 평가지표 개발이 필요하다.

  • PDF

연구개발과제의 양적.질적 성과분석지수 개발 : IT핵심기술개발사업을 중심으로

  • 유승훈;이종식;김상태
    • 기술경영경제학회:학술대회논문집
    • /
    • 기술경영경제학회 2009년도 동계학술발표회
    • /
    • pp.413-433
    • /
    • 2009
  • 질적인 측면을 충분히 감안하지 못한 양적 성과분석은 연구개발 과제의 성과를 제대로 반영하지 못하는 문제점을 안고 있다. 따라서 양적 성과와 질적 성과를 함께 종합적으로 고려할 수 있는 종합적인 성과분석지수를 개발할 필요가 있다. 본 연구에서는 주성분 분석과 동일 가중치를 부여하는 방식을 이용하여, 특허 출원 건수, SCI 게재논문 건수, 기술이전 건수라는 3가지 양적 성과지표와 이에 대응되는 특허 심사청구 항수, 논문게재 학술지의 IT, 총 연구비 대비기술료 비중의 3가지 질적 성과지표를 성과지표로 고려하면서 성과분석지수를 개발하고자 하였다. 주성분 분석의 적용 결과 특허 출원 건수(0.2160), SCI 논문게재 건수(0.1510), 기술이전 건수(0.1564), 특허 심사청구 항수(0.2257), 논문게재 학술지의 IF(0.2218), 기술료 비중(0.0291)의 가중치를 얻을 수 있었다. 이 6가지 평가지표는 종합평가지수라는 하나의 틀로 결합되어 개별 과제의 성과를 평가하는 데 활용될 수 있다. 더 나아가 양적 성과지표와 질적 성과지표로 구분하여 평가할 수 있다. 가중치 결정 방법에 따라 평가결과가 크게 달라지지는 않았지만, 가중치 결정 방법과 상관없이 양적 성과지표 평가결과와 질적 성과지표 평가결과는 크게 달랐다. 한 가지 흥미로운 점은 과제평가등급과의 상관관계를 따져보았더니 질적 성과지표와 과제등급과의 상관관계가 양적 성과지표와 과제등급과의 상관관계보다 더 크다는 것이다. 따라서 성과분석에 있어서 질적 성과지표를 반영한 질적 성과분석이 반드시 수행될 필요가 있다. 앞으로 특허 인용도 등 보다 다양한 질적 변수를 확보하여 성과분석지수를 보완할 필요가 있을 것이다.

  • PDF

한국 의학학술지의 SCI영향력지표 계량측정 연구 : 1991년-1999년 (A Scientometric Study SCI Impact Factors of Major Korean Medical Jernals: 1991-1999)

  • 이춘실
    • 정보관리학회지
    • /
    • 제18권1호
    • /
    • pp.85-104
    • /
    • 2001
  • A Scientometric Study SCI Impact Factors of Major Korean Medical Jernals: 1991-1999 본 연구에서는 SCI학술지가 아니라서 Journal Citation Reports(JCR)를 통하여 영향력지표 값을 쉽기 알 수 없는 학술지들의 영향력지표값을 JCR 방식으로 산출함으로서, 한국 의학 학술지들의 구체적인 학술지 평가지표를 제시하고 국제적인 위상을 객관적으로 파악하였다. 1969년부터 1998년까지 10년간 의학분야의 국내학술지 8종에 발표된 7,779편의 논문을 대상 으로 SCI검색을 하여 연도별로 인용빈도를 측정하고 1991년부터 1999년까지의 학술지 영향 력지표를 JCR과 동일한 방식으로 계량하여 분서하였다. 한글학술지 4종의 경우에는 국내학 자들이 SCI논문을 많이 발표하는 분야의 대표적인 학술지임에도 불구하고, SCI 인용을 거 의 찾아볼 수 없었다. 영문학술지 4종에 대한 SCI 인용빈도는 1994년경부터 계속 늘어나고 있으며, 특히 1997,8년경부터는 인용주기가 짧아져서 최근 2,3년간 발표된 논문에 대한 인용 이 급증하고 있고, 따라서 영향력지표값이 높아지고 있는 것은 매우 고무적이다. 한국 의학 학술지들의 10년치 영향력지표값 평균은 0.002에서 0.126까지 분포하였으며, YMJ의 1999년 도 영항력 지표값이 0.331로 가장 높았다. 한글학술지들의 영향력지표값을 같은 분야의 SCI 학술지들과 비교하여 보면, 모두 SCI 등재학술지의 최하위 영향력지표겂보다 낮았고, 영문 학술지는 대개 최하위권이어서 한국학술지의 국제적 위상은 매우 낮은 것으로 나타났다. 한 국 의학학술지 3종은 1990년대 후반 영향력지표값이 0.2 정도가 되었을 때 SCI에 등재되기 시작하였는데, 이들은 모두 영문학술지들이다. 영문으로 발행되는 현재 MEDLINE 학술지인 KJP는 1999년의 영향력지표값이 0.198로서 SCI등재 가능성이 있는 학술지로 판단된다.

  • PDF

대학도서관의 외국학술지 평가모형 개발을 위한 평가지표 분석 (Analysis of Evaluation Indicators for the Development of Evaluation Models of Foreign Academic Journals)

  • 김신영;이창수
    • 정보관리학회지
    • /
    • 제21권2호
    • /
    • pp.45-67
    • /
    • 2004
  • 본 연구는 인쇄잡지 중심의 소장 패러다임 대 전자잡지 위주의 접근 패러다임이 대립하는 상황에서 대학도서관의 하이브리드형 학술지 수집정책의 이론적 토대가 되는 평가요소를 분석하여 한국적 실정을 고려한 외국 학술지의 평가모형 개발에 필요한 기초자료를 마련하는데 그 목적이 있다. 구체적으로 질문지법을 통하여 학술지 수집규모 상위 40개 대학도서관의 외국학술지 선정과정에서 예비평가지표(인쇄형 27개, 전자형 37개)의 적용도를 조사하고, 그 데이터를 다양한 통계적기법으로 분석하였다. 인쇄학술지 평가지표의 요인별 상대적 중요성은 응답 평균값으로 산출하였는데 그 결과는 학과당 구독종수, 이용도, 선정권한, 전자학술지 구독조건, ISI 영향지수, 국제성과 지명도, 구독가격, ILL/DDS 수장공간 순으로 나타났다. 한편, 전자학술지는 구독가격, 접근성, 전자학술지 구독조건, 컨소시엄, 선정권한, 접근확장성, 학과당 구독종수, 대학의 학문적 특성, ISI 영향지수, ILL/DDS 국제성과 지명도 순으로 나타났다.

학술지의 피인용횟수 순위를 적용한 tapered h-지수의 변형지표 "Kor-hT"에 관한 연구 (A Study on the "Kor-T", a Modified Tapered h-index, by Applying the Ranking According to the Number of Citations of Journals in Evaluating Korean Journals)

  • 고영만;조수련;박지영
    • 정보관리학회지
    • /
    • 제30권4호
    • /
    • pp.111-131
    • /
    • 2013
  • 본 연구에서는 '학술지의 피인용횟수 순위'를 적용한 tapered h-지수의 변형지표 Kor-$h_T$를 고안하여 제안하였다. Kor-$h_T$의 의미를 평가하기 위하여 Kor-$h_T$ 지수 값의 중복률 및 지수 값과 평가요소 사이의 연관성 변화를 다른 학술지 평가지표인 h-지수, tapered h-지수 및 IF와 비교 분석하였다. 지수 값의 중복률 분석은 지표의 변별력을 살펴보기 위한 것이며, 지수 값과 평가요소와의 상관관계 분석은 지표의 평가요소인 피인용횟수 및 논문 수가 지수 값에 각각 어떻게 반영되는지를 알아보기 위한 것이다. 분석을 위해 2008년부터 2010년까지의 한국학술지인용색인(KCI) 3개년 데이터를 사용하였다. 분석 결과 본 연구에서 제안한 Kor-$h_T$가 비교 대상 지표에 비해 지수 값의 중복률이 가장 낮아 높은 변별력을 보였으며, 지수 값과 평가요소와의 상관관계에 있어서도 피인용횟수와 논문 수 모두에서 상관관계가 가장 높은 것으로 나타났다.

한국 학술지 평가를 위한 KCI 기반 복합지표의 지수 값과 질적·양적 평가요소 사이의 연관성 및 학술지 등재 상태 구별 능력에 관한 연구 (A Study on the Correlation between the index Values and Qualitative·Quantitative Evaluation Elements and the Distinction Ability of the Journals' Registration Condition of the KCI-based Composite index in Evaluating Korean Journals)

  • 고영만;박지영
    • 한국문헌정보학회지
    • /
    • 제46권2호
    • /
    • pp.245-260
    • /
    • 2012
  • 본 연구의 목적은 Kor-Factor2의 평가요소인 연평균 논문 수 대신 '총 논문 수의 십분위수'를 적용하여 지수 값과 질적 양적 평가요소 사이의 연관성의 변화를 분석하고, 다른 평가지표와 비교하여 등재학술지와 등재후보학술지를 구별해내는 정도를 평가하는 것이다. 지수 값과 질적 양적 평가요소 사이의 연관성의 분석은 지수 값과 평가요소 사이의 상관계수를 구하여 Kor-Factor2의 경우와 비교하는 방식으로 이루어졌다. 학술지 등재 상태의 구별 능력에 대한 평가는 Kor-Factor2, IF 및 학술지 h-지수를 비교 대상으로 하여 각 지수 값을 구하고, 등재후보학술지 집단과 등재학술지 집단으로 나누어 두 집단의 지수 값 평균 차이에 대한 독립표본 t-검정을 실시하였다. 연구 결과 본 논문에서 총 논문 수의 십분위수를 적용하여 제안한 지표가 Kor-Factor2와 비교하여 지수 값과 질적 평가요소 사이의 연관성이 양적 평가요소와의 연관성에 비해 높은 것으로 나타났으며, 학술지의 등재 상태에 따른 차이 구별 능력에 있어서도 Kor-Factor2, IF, 학술지 h-지수에 비해 우수한 것으로 나타났다.

신재생에너지 발전차액지원제도의 성과평가에 관한 연구 (A Study on Performance Evaluation of New & Renewable Energy Feed-in Tariffs)

  • 조기선;이창호
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2008년도 추계학술대회 논문집 전력기술부문
    • /
    • pp.485-487
    • /
    • 2008
  • 본 논문은 신재생에너지 보급 확대를 위해 2002년도부터 국내에서 시행되고 있는 발전차액지원제도의 시행성과의 평가기준으로서의 성과지표를 개발하였다. 제안한 성과지표는 평가자의 주관이 개입될 수 있는 지의 여부에 따라 정량(계량)지표와 정성(비계량)지표로 구분하고, 사업시행절차에 따른 투입, 과정, 산출, 그리고 결과지표로 구분하여 성과지표를 구성하였으며, 유관기관별 성과지표의 정보공유체계를 제안하였다.

  • PDF

지자체 가뭄역량평가를 위한 정량지표 분석 (Analysis of quantitative indicators for regional resilience evaluation under drought)

  • 이찬욱;홍성진;유도근
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2020년도 학술발표회
    • /
    • pp.364-364
    • /
    • 2020
  • 세계적으로 지구온난화 등 기후변화의 영향으로 재해발생의 빈도와 피해 심도가 증가하고 있다. 일반적으로 자연재해에 의한 피해복구에 소요되는 비용은 재해 피해액보다 크다. 선진국의 경우 이러한 재해발생 가능성을 두고, 피해를 최소화시키기 위하여 복원력에 초점을 맞추어 관련 정책을 수립하고 있다. 그러나 가뭄의 경우 타 재해에 비하여 지속기간이 길고 그 지속기간에 따라 피해의 영향이 지역별로 편차를 두고 달라지게된다. 따라서, 정확한 역량평가 결과를 제시하기 위해서는 가뭄이 자주 발생하는 지역, 복구능력이 탁월한 지역 등을 구분하고 평가하여 지자체가 갖고 있는 가뭄에 대한 역량을 정량적으로 평가할 필요가 있다. 가뭄역량평가(복원력 평가)는 항목의 특성에 따라 크게 내구성, 대체성, 자원동원력, 그리고 신속성으로 구분된다. 본 연구에서는 각 항목별 가뭄 시 적용 가능한 정량적 복원력 지표 8개를 도출 하였으며 지자체별 해당 데이터를 확보하였다. 다음으로 주요 지자체별 복원력 항목 값을 정규화 하여 표준점수화 하였다. 제안된 방법론은 향후 개별 항목특성에 맞는 정량화 방법, 항목별 가중치 부여방법, 그리고 정성지표 고려 등과 같은 지속적인 추가연구가 진행되어야 하지만, 제안된 복원력 정량지표와 그 결과는 지역적인 가뭄에 대한 지자체별 역량강화전략을 제시하기 위한 기초자료로 활용이 가능하다.

  • PDF

호우 위험도 평가를 이용한 피해예측 (Damage Prediction Using Heavy Rain Risk Assessment)

  • 김종성;최창현;이종소;김형수
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2017년도 학술발표회
    • /
    • pp.154-154
    • /
    • 2017
  • 전 세계적인 기후변동과 기후변화의 영향으로 대규모 인명 및 재산피해를 유발하는 자연재난의 빈도와 강도가 증가하고 있다. 이렇게 변화하는 상황에서 효율적인 대책을 수립하기 위해서는 재해에 노출된 특성을 지역적 특성과 함께 고려하여 지역별로 재해에 위험한 정도를 평가하는 것이 선행되어지고, 재난 피해 발생전에 피해 지역 및 범위를 예측하는 것이 필요하다고 판단된다. 따라서 본 연구에서는 국내 자연재난 피해의 65% 이상을 차지하는 호우피해를 대상으로 PSR(Pressure-State-Response) 구조를 이용하여 호우피해위험지수(Heavy rain Damage Risk Index, HDRI)를 제안하여 호우 위험도를 평가하고자하였다. 또한 도출된 지역별 위험등급에 따른 호우피해 예측함수를 개발하여 재해발생 전에 개략적인 피해의 범위를 예측하고자 하였다. 먼저 지역별 호우 위험도 평가를 위해 압력지표, 현상지표, 대책지표를 구축하고, 주성분분석을 이용하여 평가지표를 결정하였다. 결정된 평가지표를 동일한 가중치를 부여하여 호우피해위험지수를 도출하였다. 분석결과, 경기도 31개 지자체 중에서 가장 안전한 1등급인 지자체는 15개의 지자체로 나타났으며, 2등급인 지자체는 7개, 3등급인 지자체는 9개로 분류되었다. 지자체별 호우 위험도 등급에 따라서 재해기간별 총강우량, 재해일수, 선행강우량(1~5일), 지속시간별 최대강우량(1~24시간) 등의 자료를 설명변수로 구축하였고, 다중회귀모형과 주성분분석을 활용하여 예측함수를 개발하였다. 등급별 호우피해 예측함수는 N-RMSE가 12~18%로 호우피해를 적절하게 예측하는 것으로 평가되었다. 본 연구를 통해 지자체별 호우피해위험도 등급을 파악 할 수 있으며, 평가된 호우피해위험도 등급별로 호우피해 예측함수 개발을 통해 사전에 호우피해 발생 및 규모를 파악할 수 있게 되었다. 따라서 본 연구의 결과는 각 지자체 및 관련 부처에서 효과적인 방재체계를 수립하는데 있어 기초자료로 활용될 수 있을 것으로 판단된다.

  • PDF

한국 의학학술지 인용지표 개발 연구 (The Development of Citation Indicators of Korean Medical Journals)

  • 이춘실
    • 한국비블리아학회지
    • /
    • 제13권1호
    • /
    • pp.27-41
    • /
    • 2002
  • 본 연구에서는 국내에서 처음으로 한국 의학학술지에 의한 한국 의학학술지의 인용도 분석을 광범위한 규모로 시도하고 각종 학술지 인용지표를 개발한$\ulcorner$KoMCI 2000: 한국의학학술지 인용정보$\lrcorner$보고서에 수록된 다양한 데이터와 인용지표의 분석을 통하여, 국내 의학학술지의 인용수준에 대한 정확한 이해를 도모하고 인용지표들의 한계를 노출함으로써 인용데이터를 합리적으로 그리고 타당성 있게 해석 및 활용하는 방안을 제안하고, 한국의학계의 실정에 좀 더 부합하는 학술지 인용지표 및 학술지 평가지표를 개발할 수 있는 토대를 마련하였다. 국내 의학학술지의 인용분석이 한국 의학학술지 문헌이 인용하는 문헌의 8.5%밖에 안되는 인용데이터를 대상으로 하기 때문에, 한국 의학학술지(KoMCI)의 영향력 지표값은 0.424 이하로 아주 낮게 분포하고 그 평균값은 0.182이다. 한국문헌이 인용하는 전체 참고문헌 중 자체학술지 인용비율은 4.6%이지만, 한국학술지 인용 중에서 차지하는 비율은 대부분 50% 이상으로 매우 높다. 이것은 같은 주제분야에 속하는 학술지가 몇종씩 밖에 안 되는 등 다른 한국 의학학술지를 인용할 폭이 매우 좁기 때문이다. 동일한 학술지 (2000년도 SCI 영향력지표값이 SCI JCR에 보고된 한국 의학학술지 2종)의 KoMCI 영향력 지표값이 SCI 영향력지표값의 1/3 정도 수준으로 큰 차이가 있는 것으로 나타났다. 이것은 SCI 학술지 5,900종의 1/100(의학학술지로 제한하면 1/30) 정도밖에 안 되는 69종으로부터 받은 인용을 분석하기 때문이다.

  • PDF