• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2007년도 추계학술발표대회
• /
• pp.609-612
• /
• 2007

정보사회와 컴퓨딩환경의 발전으로 언어, 학력, 인지도 등의 평가도구로서 컴퓨터기반의 평가환경이 보편화되었다. 특히 컴퓨터기반의 학력평가 환경을 위해서는 문항의 난이도와 변별도 등 문항의 특성을 정확히 분석하는 것이 필수적이다. 문항분석은 컴퓨터기반의 평가를 위한 양질의 문제은행 구성 및 문항과 수험자 능력의 정확한 추정과 체계적이고 과학적인 평가를 위한 전제조건이라 할 수 있다. 본 논문에서는 고전평가이론의 문제분석을 적용한 문제은행 시스템을 구현하였으며 수험결과를 분석하여 각 문제의 곤란도나 변별도, 문항분포도를 통하여 문제를 분석할 수 있도록 하였다. 또한 수험자가 각 문제를 푸는데 걸린 시간을 기록하여, 수험자의 문제에 이해도를 정확히 분석하고 수험자의 추측, 랜덤 선택 등으로 인한 정답을 맞힐 가능성과 한 문제를 읽고 이해하는 시간이 너무 오래걸린 이유에 대해서도 추정하였다. 문제분석 및 수험결과의 평가 및 분석으로 교사들은 문항의 양호도를 높일 수 있고 문제은행에 저장되어 있는 문항들을 수정하고 보완하여 양질의 문항을 출제할 수 있도록 하였다.

• 한국수학교육학회지시리즈A:수학교육
• /
• 제32권3호
• /
• pp.220-243
• /
• 1993

고전검사이론과 문항반응이론을 사용하여 2-7차 실험정가 수리영역문항을 분석하였다. 2차부터 7차에 걸친 시험은 피험자에게 너무 어려웠으며 횟수를 거듭함에 따라 점점 더 어려워진 것으로 나타났다. 5차 실험평가 문항분석결과에서 문항 10과 15는 검토가 필요한 문항으로 나타났다. 그리고 7차 실험평가 문항분석결과에서 문항 11과 17은 검토가 필요한 문항으로 나타났다.

• 한국초등수학교육학회:학술대회논문집
• /
• 한국초등수학교육학회 2010년 학술발표대회 논문집
• /
• pp.157-172
• /
• 2010

본 연구는 현행 초등학교에서 이루어지고 있는 서술형 평가의 유형과 문제점을 분석해 보고 2007개정 교육과정에 따른 수학과 서술형 예시 평가 문항을 개발해 보는데 목표가 있다. 학교에서 시행되고 있는 평가 자료의 분석은 수학교과서, 국가수준 학업성취도 평가지, 서울시 교육청 보급 2010 장학자료집, 서울시내 학교에서 시행되고 있는 평가 문항을 분석해 보았다. 그리고 예시 서술형 평가 문항개발은 2007개정 교육과정에 따른 수학과 4학년을 대상으로 하였다. 평가 문항 분석의 결과는 문항 유형이 단순하고 교과서와 장학자료집의 수준을 벗어나지 못하고 있으며 창의성 영역의 평가는 거의 이루어지고 있지 않았다. 서술형 예시평가 문항의 개발은 수학과의 내용영역과 인지적 영역뿐 아니라 교육계의 화두가 되고 있는 창의성 영역까지 평가내용으로 포함시키고자 노력하였으며 영역별 1-2 문항을 개발하였다.

• 과학교육연구지
• /
• 제36권2호
• /
• pp.293-302
• /
• 2012

이 연구는 중학교 1학년 과학과 총괄 지필평가 출제경향을 조사하기 지필평가 문항의 행동영역, 내용영역, 문항유형, 난이도에 대하여 조사 분석하였다. 10개의 중학교의 1차와 2차 지필평가 문항의 총 645개를 연구대상으로 하여 분석하였다. 연구결과는 다음과 같다. 첫째, 지필평가 문항의 행동영역은 '지식, 이해' 수준으로 편중되어 있으며, 적용, 분석, 종합, 평가 영역의 문항은 거의 출제가 되고 있지 않았다. 둘째, 내용영역은 기존의 연구의 결과에 비해 과학적 탐구과정의 출제 빈도수가 많아졌지만, 여전히 과학지식을 묻는 문항이 과학적 탐구과정의 문항과 비교하여 두 배 이상의 비율로 출제되고 있음을 알 수 있었다. 셋째, 문항유형은 선다형 문항 중심으로 출제 되고 있는 것으로 조사되었다. 넷째, 정답률을 기준으로 문항의 난이도를 분석한 결과, 전체적인 빈도수에서 '상'에 해당하는 문항의 비율은 교사가 목표로 하는 난이도 비율보다 낮았으며, '중'의 비율은 교사가 생각하는 난이도 비율보다 높은 것으로 조사되었다. 과학학습에 대한 다양한 영역의 총체적인 평가를 위해서는 교사의 평가 및 문항 개발의 전문성 신장에 대한 노력이 이루어져야 할 것이다.

• 한국수학교육학회:학술대회논문집
• /
• 한국수학교육학회 2009년도 제43회 전국수학교육연구대회 프로시딩
• /
• pp.45-76
• /
• 2009

본 연구는 1992학년도부터 2008학년도까지의 수학과 중등교사 신규임용후보자 선정 경쟁시험(이하 중등교사 임용시험)과 2009학년도의 개정 시행된 시험(2008년 11월 9일), 그리고 이에 앞서 한국교육과정평가원에서 시행한 2009학년도 수학과 중등교사 임용시험 모의평가(2008년 6월 14일 시행)을 분석하고 평가문항의 내용별 분포와 적절성을 검토함으로써 수학과 중등교사 임용시험의 개선방안을 모색하기 위하여 다음과 같은 연구문제를 설정하고 이에 대한 분석을 하였다. 수학전공과목 임용시험 출제 평가문항의 내용영역별 분류는 어떠한가? 수학과 중등교사 임용시험 평가 문항들의 각 영역별 출제 빈도수는 어떠한가? 전국 사범대학교 수학교육과의 교육과정은 어떠한가? 임용시험 평가문항들이 사범대 수학교육과의 기본 이수과목을 포함한 교육과정을 적절하게 반영하고 있는가? 향후 중등교사 임용시험의 개선점에는 무엇이 있겠는가? 각 연구문제에 대한 분석결과에 대해 심층적으로 알아보고 중등교사 임용시험 평가문항들과 전국의 사범대학교 수학교육과의 기본 이수과목들에 대한 관련성에 대해 알아볼 것이다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2009년도 춘계학술발표대회
• /
• pp.992-995
• /
• 2009

온라인 평가 시스템의 발전으로 오프라인을 통한 전통적인 시험에서 수준에 맞는 다양한 평가가 가능한 온라인 평가가 폭넓게 수행되고 있다. 하지만 평가문항에 대한 체계적인 유형 분류가 미흡하여 평가문항을 온라인 평가 시스템을 통해 표현하고 이기종 시스템간의 평가문항을 원활하게 공유하지 못하고 있다. 이 논문은 국내외 평가문항 유형 분류를 분석하고 온라인 상에서 평가문항을 효과적으로 표현하기 위한 명확한 문항 분류 기준을 제시한다.

• 공학교육연구
• /
• 제8권1호
• /
• pp.31-45
• /
• 2005

본 논문에서는, 강의 평가에 필요한 설문을 효과적이며 체계적으로 얻기 위한, 대표 문항 추출 방법을 비교하였다. 비교에 사용한 방법은 요인분석(Factor Analysis: FA), FCM(Fuzzy c-Means) 알고리즘과 군집분석(Cluster Analysis : CA) 등으로 이러한 방법들을 사용하여 고려할 수 있는 다양한 형태의 많은 문항들로부터 적은 수의 문항을 추출한다. 추출된 문항은 많은 수의 문항들이 형성하는 클러스터의 대표 문항을 이루고 있다. 이를 위해 여러 개의 설문지로부터 얻은 120 문항의 강의 평가서를 명지대학교 외 3 개 대학교 646명의 학생들에게 평가를 실시하여 데이터를 얻었는데 학생들은 주어진 문항에 대하여 "매우 그렇다", "그렇다", "보통이다", "그렇지 않다", "매우 그렇지 않다", 그리고 "해당 없다"까지의 6등급으로 응답하였다. 각 문항에 대한 학생들의 응답 성향을 분석하여 약 25문항을 추출하였다. 실험 결과 본 논문에서 비교 분석한 요인분석, FCM알고리즘과 군집분석 등의 기법은 매우 유사한 설문을 추출할 수 있었다.

• 한국과학교육학회지
• /
• 제22권1호
• /
• pp.122-131
• /
• 2002

본 연구는 수행 평가 방식의 중요성이 대두됨에 따라 실지로 수행형 평가 문항이 전통적인 선다형 평가문항에 비해 어떤 학생들에게 어떻게 유용한지를 분석한 연구이다. 이를 위하여 제 3차 수학 과학 성취도 국제비교 반복 연구에 사용된 선다형과 수행형 평가문항들을 내용영역별로 분석하여, 수행형의 평가문항과 선다형의 평가문항의 효율성을 비교 분석하였다. 자료분석 결과 수행형의 문항이 선다형의 문항에 비하여 학생들의 능력을 더 정확하게 추정함으로써 효율성이 높은 것으로 나타났다. 특히 환경이나 과학의 본성 영역에 비하여 지구과학, 생물, 물리와 화학 영역에서 수행형의 문항이 선다형의 문항에 비하여 학생들의 능력을 더 정확하게 추정하고 있음을 보여주었다. 또한 선다형의 문항에 비하여 적은 수의 문항으로 학생들의 능력을 추정함에도 불구하고 추정오차가 적어, 적은 수의 수행형 문항으로도 학생들의 능력을 정확하게 추정할 수 있음을 시사하고 있다.

• 대한수학교육학회지:학교수학
• /
• 제17권2호
• /
• pp.331-353
• /
• 2015

본 연구의 목적은 수학교사의 평가 전문성 기준에서 평가도구의 개발과 관련된 세부 내용 중 평가문항 개발에 대한 역량을 탐색하는 것으로 중등학교 예비교사와 현직교사의 평가문항에 대한 자기인식의 차이는 어떠한지를 분석하였다. 평가문항 개발에 대한 자기인식 검사 도구는 수학 평가문항 개발에 대한 교사의 신념과 수학 평가문항 개발에 대한 교사의 자기평가로 구성되었다. 예비교사는 사범대학 재학생들을 대상으로, 현직교사는 중 고등학교에 재직교사를 대상으로 수학과 평가문항 개발에 대한 자기인식 검사를 실시하였다. 수학교사의 평가문항 개발에 대한 자기인식 검사를 위해 총 310명의 중등 예비교사와 현직교사의 응답결과를 분석하였다.

• 과학교육연구지
• /
• 제34권1호
• /
• pp.164-174
• /
• 2010

이 연구의 목적은 중학교 과학 생물영역의 총괄 평가 문항의 평가 목표를 블룸의 신 교육목표분류체계에 따라 분류하여 평가 목표의 특성을 파악하는 것이다. 대구지역 중학교 25개교로부터 총 1,711개의 총괄 평가 문항을 수집하여 블룸의 신 교육목표분류체계에 따라 각 문항의 평가 목표를 분석하였다. 총괄 평가 문항을 지식과정 차원의 목표분류틀로 분석한 결과, 사실적 지식에 대한 평가를 목표로 하는 문항이 대부분(67.6%)을 차지하였다. 인지과정 차원에서 표본 문항의 평가 목표는 기억하는가를 평가하는 것이 가장 우세하였다(76.1%). 문항의 주된 평가 목표들이 블룸의 신교육목표 분류체계 중 특정 영역에 치우쳐 있었고, 동일한 분류체계로 수업 목표를 분류했던 이전의 연구 결과와 비교했을 때, 수업목표와 평가 목표의 분포에 차이가 있었다. 학년별 문항의 평가 목표 수준을 분석한 결과, 학년이 올라감에 따라 변하는 인지 수준을 고려하여, 평가 목표를 선정하여야 함에도 불구하고 문항의 평가 목표에서 학년별 차이는 발견할 수 없었다.