• 한국과학교육학회지
• /
• 제35권1호
• /
• pp.121-130
• /
• 2015

국가 수준의 표준화된 학업 성취도 평가 결과를 분석하여 학생들의 성취 수준을 파악하고 이를 교육정책 수립이나 교수활동 개선에 반영하는 과정은 교육의 책무성으로 중요한 부분이다. 본 연구에서는 과학과 국가 수준 학업 성취도 평가 결과를 분석하고, 답지 반응률 분포 곡선을 활용하여 평가 문항의 특성을 분석하고자 하였다. 이를 위해 2010년부터 2013년까지 시행된 과학과 성취도 평가 결과를 성취 수준에 따라 분석하였으며, 성취도 점수에 따른 특정 문항의 정오답 반응률을 토대로 최적 곡선을 추정한 그래프인 답지 반응률 분포 곡선을 활용하여 선다형 평가 문항 112개의 정답지와 오답지 반응률 곡선의 유형을 분류하고, 유형별 문항 특성을 분석하였다. 분석 결과, 정답지는 5가지 유형(S자형, J자형, 직선형, F자형, 계단형)으로 분류하였고, 오답지는 4가지 유형(보통형, 평지형, 산지형, 상승형)으로 분류하였다. S자형의 정답지 반응 곡선과 보통형의 오답지 반응 곡선이 조합인 문항이 가장 많았으며, 성취 수준에 따라 학생들을 변별하는데 적절한 문항인 것으로 분석되었다. 또한, 정답 반응률 분포와 오답 반응률 분포가 서로 연관되는 것으로 나타났다. 연구 결과를 토대로 교수 학습, 교실 평가 등에서 함의를 논의하였다.

• 한국학교수학회논문집
• /
• 제16권4호
• /
• pp.637-654
• /
• 2013

본 연구는 수학교육 선진화 방안('12.1)에 따라 중 고등학교 수학교사가 내신 평가문항을 출제함에 있어 유념해야할 개발 절차를 안내하는 것을 목적으로 하였다. 연구 결과, 평가문항 개발 가이드라인을 크게 '지도 내용 분석 과정', '평가 문항 구성 과정', '평가 문항 완성 과정'으로 범주화하여 제시하였다. 본 연구의 적용 과정에서 연구 결과가 수학교사의 평가전문성 신장에 기여할 것이며 교사의 평가문항 출제 후 자기진단 도구로도 활용될 수 있음을 확인하였다.

• Communications for Statistical Applications and Methods
• /
• 제1권1호
• /
• pp.206-214
• /
• 1994

본 논문은 1994학년도 부터 부활된 대학별고사 실시에 따른 문항분석, 표준 점수제 그리고 검사동등화의 문제점을 지적하기 위하여 교육측정이론의 기본 개념을 소개하는데 있다. 대학별고사의 타당성과 신뢰성을 보장받기 위하여는 양질의 문항제작이 우선하여야하며, 이를 위하여 문항분석은 종전에 사용하던 고전검사이론 보다는 문항반응이론을 이용하는 것이 바람직하다. 문항반응이론에 의한 문항분석은 피험자 집단의 특성에 의하여 문항특성이 달리 분석되지 않는 특징을 지니고 있기 때문이다. 문항이 논술형일 경우 채점자간 신뢰도와 채점자 내 신뢰도를 간과하여서는 안될 것이다. 다양한 선택과목을 채택하는 대학별 고사에서 입학 사정을 위하여 원점수를 사용하거나, 표준점수 혹은 검사동등화 방법을 이용하고 있으나 이는 교육측정이론에 위배된다. 다른 과목에 대한 인가의 능력을 상대비교 할 수 없으며, 표준점수와 검사동등화는 동일 능력에 대한 상대비교를 위한 방법이다. 특히 검사동등화는 동일 특성, 공정성, 모교집단 불변성, 대칭성을 전제한다. 표준점수제에 의하여 수험생들의 다른 능력을 상대 비교하는 방법은 다른 능력이 점수로 표현되기 때문에 가능하나 그 점수가 무엇을 의미하는 가를 분석할 때는 교육평가의 기본 철학에도 위배된다.

• 한국과학교육학회지
• /
• 제24권3호
• /
• pp.519-531
• /
• 2004

최근 제7차 교육과정이 실시되면서 준거 지향적인 수행평가에 대한 요구가 커지고 있으며, 이러한 상황에서 평가의 절대적인 기준을 마련할 필요성 또한 절실해지고 있다. 본 연구는 제7차 교육과정에 근거하여 고등학교 과학 중 '생식' 단원과 '생물 농축' 단원에 대해서 필수 학습 요소, 성취 기준, 평가 기준 및 평가 문항을 개발하고, 이를 바탕으로 개발한 평가 문항을 실제 현장에 적용하여 그 타당성을 검증하는 것을 목적으로 한다. 본 연구에서는 제7차 교육과정과 고등학교 과학의 7종 교과서를 바탕으로 하여, '생식' 과 '생물 농축' 단원의 필수 학습 요소를 추출하고, 준거 지향 평가의 기초가 되는 객관적이고 타당한 성취 기준 및 평가 기준을 마련하였다. 추출된 필수 학습 요소는 '생식' 단원에서 12개, '생물 농축' 단원에서 4개이었으며, 개발된 성취 기준은 '생식' 단원에서 총 26개, '생물 농축' 단원에서 총 9개로 각각은 지식(K), 탐구(P), 태도(A)의 세 개 영역으로 구분하여 개발하였다. 이상과 같이 개발된 성취 기준을 바탕으로 평가 기준을 개발하였다. 개발된 평가 기준의 수는 '생식' 단원에서 총 25개, '생물 농축' 단원에서 9개였다. 성취 기준과 평가 기준에 따라 '생식' 단원과 '생물 농축' 단원에서 개발된 평가 문항의 수는 서술형 문항 17개, 논술형 문항이 13개, 포트폴리오가 2개로 총 22문항이었다. 각 평가 문항은 구체적인 채점 기준을 제시하였으므로, 교육과정에 근거한 객관적인 평가에 사용될 수 있다. 개발된 평가 문항 중, 서술형 문항 8개를 경기도 소재 고등학교 1학년 학생 240명을 대상으로 적용 분석하였다. 서술형 문항에 대한 학생들의 응답을 두 가지 검사 이론을 적용하여 분석하였는데, 평가 문항의 기본적인 양호도 검증을 실시한 결과, 본 연구에서 개발된 서술형 문항들은 난이도와 변별도 면에서 전반적으로 적절한 지수를 보여 수행 평가로 사용하기에 적절한 문항들이었다. 개발한 서술형 수행 평가 문항들은 미리 개발된 성취 기준과 평가 기준을 바탕으로 하였으므로 교수 학습의 목표와 내용에도 적합하였다. 고전 검사 이론과 다분 문항 반응 이론에 의해 분석된 문항의 변별도에는 언어적인 해석의 차이가 없었으나, 문항 난이도의 경우는 고전 검사 이론을 사용하였을 때 집단의 특성이 많이 나타나 다분 문항 반응 이론을 사용한 결과와 비교하여 해석의 차이가 다양하게 나타났다.

• 컴퓨터교육학회논문지
• /
• 제15권6호
• /
• pp.33-41
• /
• 2012

본 논문은 온라인 평가 문항 관리 시스템 및 방법에 관한 것이다. 제안하는 시스템은 학습자 정보 데이터베이스, 영역별, 난이도별로 분류된 문항을 저장하는 문제 은행 데이터베이스로 구성된다. 문제은행 데이터베이스는 특정 학습자 또는 특정 학습에 대한 문항을 선택하는 문항 선제부, 특정 학습자 또는 특정 학습에 대한 문제지를 제작하는 문제지 제작부, 문제지를 저장하였다가 온라인 테스트를 수행할 때 출력하는 문제지 은행 데이터베이스를 포함한다. 학습자가 온라인 테스트에 제출된 문항들에 대한 문항 선택순서, 보기 선택순서, 클릭회수, 반응시간에 대한 평가 데이터를 수집하는 온라인 테스트부, 및 온라인 테스트부로부터 수집된 학습자의 온라인 테스트 평가 데이터를 분석하여 학습자의 학습수준과 학습능력, 성향을 평가하고 진단하여 보고하는 반응패턴 분석부를 포함한다. 제안하는 시스템은 보기 선택순서, 클릭회수, 반응시간을 학습자의 평가결과에 반영하여 효율적으로 학습자의 학습수준과 학습능력, 성향을 평가하고 진단할 수 있다.

• 디지털융복합연구
• /
• 제19권4호
• /
• pp.339-347
• /
• 2021

본 연구는 객관식 문항이 폐지된 이후인 2014년부터 2020년까지 7년간 체육 중등교사 임용시험의 교과교육학 문항을 한국교육과정평가원에서 제시한 평가내용요소를 근거로 분석하였다. 연구결과로 교과교육학 문항은 7년간 48문항이 출제되었으며, 83개의 하위질문이 발견되었다. 시사점으로는 첫째, 하위질문 개수의 빈도가 높아지면서 통합형 문제가 출제되고 있다. 둘째, 출제 문항 영역의 심각한 불균형 문제가 드러났다. 셋째, 체육교수학습 및 평가, 체육교육과정 영역에 지나친 출제 의존도를 보이고 있었다. 넷째, 교과내용학과 중복되는 평가 영역이 존재함에 따라 혼란이 가중되었다. 그러므로 한국교육과정평가원의 기존 평가 영역별 분류표를 기반으로 평가 내용 요소에 대한 정의가 명확하게 내려져야 하며 신뢰로운 교사시험을 위해 특정 학자와 이론에 의존에서 벗어나 학교현장에서 도움이 될 수 있는 문항들이 개발될 필요가 있다.

• 한국학교수학회논문집
• /
• 제17권4호
• /
• pp.541-563
• /
• 2014

본 연구의 목적은 예비교사들이 수리논술과목을 통해 수학적 과정을 경험하고 평가문항 및 평가기준을 개발하는 교육과정이 예비교사들에게 어떠한 영향을 미치는지 분석하여 향후 교사교육에 시사점을 주기 위함이다. 이를 위해 서울 K대학교 수리논술 수업을 수강하는 49명의 예비교사를 대상으로 수리논술 문항개발측면과 그 문항에 대한 평가 기준 설정 과정을 중심으로 분석하였다. 분석 결과 첫째, 예비교사들이 개발한 수리논술 문항은 수학적 과정의 요소를 반영하고 있었고 특히, 그룹토의 및 중 고등학생의 응답을 보고 문항을 수정할 때는 문항의 난이도, 수학적인 추측을 통한 정당화와 문제 해결 과정을 논리적으로 서술하는 것을 고려하여 수정하는 특징을 보였다. 둘째, 예비교사들은 대부분 분석적 평가 기준표를 개발하였고, 문항의 평가 기준표를 만들고 학생의 반응을 통해 수정하는 과정을 거치면서, 결과보다는 문제해결을 중시하고 학생의 예상치 못한 풀이방법을 고려하는 등 수학적 과정을 고려하는 평가기준을 설정하였다고 볼 수 있었다. 이러한 연구결과를 토대로 교사양성교육에서 수학적 과정 평가 경험에 도움을 줄 수 있는 수리논술 수업을 계획하고 실행하는데 구체적인 방법론에 시사점을 제시한다.

• 대한수학교육학회지:수학교육학연구
• /
• 제25권3호
• /
• pp.281-302
• /
• 2015

본 연구에서는 국가수준 학업성취도 서답형 문항의 문제해결 과정에서 나타나는 오류를 살펴보기 위하여 236개 학교 8007명의 답안지를 추출하여 분석하였다. 분석에 사용한 문항은 국가수준 학업성취도 평가 중학교 수학 서답형 문항으로 내용 영역은 '문자와 식', '함수'이고 행동 영역은 '문제해결'과 '계산'이다. 두 문항 모두 주어진 문제 상황에 알맞은 식을 세우고 조건에 맞는 결과를 산출하는 문제이다. 분석 결과 각 문항에 따라 문제 상황을 파악하여 식을 세우고, 풀며, 결과를 기술하는 세가지 과정에서 다양한 오류들이 나타났다. 본 연구에서는 이에 대한 원인을 추론하여 교수학적 시사점을 이끌어 내고자 하였다.

• 한국초등수학교육학회지
• /
• 제18권2호
• /
• pp.297-318
• /
• 2014

이 연구는 서술형 평가문항을 스스로 선발하거나 개발해야하는 초등학교 교사들에게 평가 문항에 대한 안목과 평가문항 제작 시 유의점을 제공하기 위해 시도되었다. 이를 위해 서술형 평가시행에 대해 적극적인 노력을 기울여 왔던 경기도 교육청이 2011년과 2012년에 개발한 초등학교 서술형 평가 문항 30개와 그 문항으로 시험을 치룬 2개 초등학교 3, 4, 5, 6학년 학생들의 채점된 답안지를 분석하였다. 이 연구에서는 학생들의 채점된 답안지에서 발견된 채점 및 답안 기술의 오류가 교사나 학생의 문제가 아니라 평가 문항의 결함에서 비롯된 것이라 여겨지는 것들만 선별하여 사례로 정리하고, 그에 대응하는 개선방안을 제시하였다. 이 연구에서 도출한 초등학교 수학과 서술형 평가 문항의 문제점은 크게 세 가지이다. 첫째, 고등사고력을 평가한다는 서술형 평가의 기본취지를 살리지 못하는 경우, 둘째, 채점의 공정성 문제를 불러일으키는 경우, 셋째, 문제에 포함된 내용이 학생에게 그릇된 단서로 작용하는 경우 등이 그것이다.

• 정보처리학회논문지D
• /
• 제9D권3호
• /
• pp.511-522
• /
• 2002

WBI(Web Based Instruction)는 웹을 매체로 활용하여 원거리에 있는 학습자를 교육시키는 형태로서 교수자와 학습자간 상호작용을 가능하게 하고, 다양한 형태의 학습자료를 제공하며, 공간적 제약을 극복할 수 있다는 장점이 있다 본 논문은 웹에 기반한 교육적 활용의 한 모델로서 웹기반 교육평가시스템의 설계 및 구현에 관한 것이다. 웹기반 교육평가시스템은 기존 시스템들의 문제점이 되고 있는 문제출제 기능의 미비점을 해결하여 웹 상에서 문제를 출제할 수 있는 온라인 출제방식과 오프라인에서 작성한 문제를 업로드하여 재사용하는 업로드 출제방식을 모두 갖추어야한다. 또한 문항분석 기능을 갖추어 학생이 풀이한 결과에 대한 각종 분석 지표를 제공하여 교사는 난이도 조정이나 문항의 수정을 통하여 문항에 피드백을 할 수 있어야 한다. 본 논문에서는 이러한 요구사항을 모두 반영하는 시스템을 설계하고 PHP 스크립트 언어와 호환성이 좋은 MySQL데이터베이스를 이용하여 구현하였다.