• 과학교육연구지
• /
• 제36권2호
• /
• pp.293-302
• /
• 2012

이 연구는 중학교 1학년 과학과 총괄 지필평가 출제경향을 조사하기 지필평가 문항의 행동영역, 내용영역, 문항유형, 난이도에 대하여 조사 분석하였다. 10개의 중학교의 1차와 2차 지필평가 문항의 총 645개를 연구대상으로 하여 분석하였다. 연구결과는 다음과 같다. 첫째, 지필평가 문항의 행동영역은 '지식, 이해' 수준으로 편중되어 있으며, 적용, 분석, 종합, 평가 영역의 문항은 거의 출제가 되고 있지 않았다. 둘째, 내용영역은 기존의 연구의 결과에 비해 과학적 탐구과정의 출제 빈도수가 많아졌지만, 여전히 과학지식을 묻는 문항이 과학적 탐구과정의 문항과 비교하여 두 배 이상의 비율로 출제되고 있음을 알 수 있었다. 셋째, 문항유형은 선다형 문항 중심으로 출제 되고 있는 것으로 조사되었다. 넷째, 정답률을 기준으로 문항의 난이도를 분석한 결과, 전체적인 빈도수에서 '상'에 해당하는 문항의 비율은 교사가 목표로 하는 난이도 비율보다 낮았으며, '중'의 비율은 교사가 생각하는 난이도 비율보다 높은 것으로 조사되었다. 과학학습에 대한 다양한 영역의 총체적인 평가를 위해서는 교사의 평가 및 문항 개발의 전문성 신장에 대한 노력이 이루어져야 할 것이다.

• 한국초등과학교육학회지:초등과학교육
• /
• 제40권2호
• /
• pp.191-209
• /
• 2021

이 연구에서는 과정중심평가의 특징이 배포된 과학과 과정중심평가 예시 문항 자료들에서 어떻게 구현되고 있는지를 분석하였다. 선행연구 리뷰를 통해 과정중심평가의 특징에 대한 분석 관점을 6가지로 추출하였다. 그 분석틀을 이용하여 시도 교육청 및 교육과정평가원에서 개발한 과정중심평가 장학자료의 초등 과학과 평가문항이 과정중심평가의 특징을 어떤 방법으로 반영하고 있는지 기술하였다. 연구 결과, 과정중심 평가의 특징은 초등 과학과 평가 문항 예시 자료들에 형식적으로 반영되어 있는 경우가 많았고, 과정중심 평가의 특징이 초등 과학과 평가 문항에 두드러지게 나타나지 않는 경우도 있었다. 개발된 예시문항들은 기존 과학과 수행평가 문항의 형태와 동일한 유형, 서·논술형 유형, 실험관찰과 유사한 유형으로 구분되었다.

• 대한화학회지
• /
• 제65권1호
• /
• pp.48-57
• /
• 2021

본 연구는 국제 학업성취도 평가인 TIMSS 2019 사전검사에서 지필 평가와 컴퓨터 기반 평가로 시행된 과학 평가 문항을 분석하여 검사 매체에 따라 문항 정답률에 영향을 미치는지를 문항 및 학년별로 살펴보았다. 그 결과, 4학년과 8학년 모두 검사 매체에 따른 과학과 문항 정답률 차이가 크지 않았다. 학년별로 살펴보면, 8학년보다는 4학년의 경우 정답률 차이가 상대적으로 크게 나타났다. 문항별로 살펴보면, 선다형 문항보다는 서답형 문항의 경우 정답률 차이가 상대적으로 크게 나타났다. 검사 매체 영향에 대한 과학과 평가 문항 내용을 분석한 결과로는 선다형 문항은 지필 평가와 컴퓨터 기반 평가 문항간의 차이가 거의 없었으나, 서답형 문항은 지필 평가에 비해 서답형 문항의 정답률이 낮아지는 경향을 보였다. 또한, 학년별로는 4학년 학생들이 8학년 학생들보다 서답형 문항에서 정답률이 낮아지는 것으로 나타났다. 본 연구를 토대로, 우리나라 컴퓨터 기반 평가의 개발과 현장 도입과 관련된 시사점을 제공하고 컴퓨터 기반 평가가 학교 평가로 잘 정착하기 위한 교육적 함의를 고찰하고자 한다.

• 한국과학교육학회지
• /
• 제22권1호
• /
• pp.122-131
• /
• 2002

본 연구는 수행 평가 방식의 중요성이 대두됨에 따라 실지로 수행형 평가 문항이 전통적인 선다형 평가문항에 비해 어떤 학생들에게 어떻게 유용한지를 분석한 연구이다. 이를 위하여 제 3차 수학 과학 성취도 국제비교 반복 연구에 사용된 선다형과 수행형 평가문항들을 내용영역별로 분석하여, 수행형의 평가문항과 선다형의 평가문항의 효율성을 비교 분석하였다. 자료분석 결과 수행형의 문항이 선다형의 문항에 비하여 학생들의 능력을 더 정확하게 추정함으로써 효율성이 높은 것으로 나타났다. 특히 환경이나 과학의 본성 영역에 비하여 지구과학, 생물, 물리와 화학 영역에서 수행형의 문항이 선다형의 문항에 비하여 학생들의 능력을 더 정확하게 추정하고 있음을 보여주었다. 또한 선다형의 문항에 비하여 적은 수의 문항으로 학생들의 능력을 추정함에도 불구하고 추정오차가 적어, 적은 수의 수행형 문항으로도 학생들의 능력을 정확하게 추정할 수 있음을 시사하고 있다.

• 한국과학교육학회지
• /
• 제18권4호
• /
• pp.617-626
• /
• 1998

본 연구의 목적은 국가적 수준에서 우리나라 초 중 고등학교 학생의 과학탐구 능력을 점검해볼 수 있는 평가체제를 개발하는 것이다. 이를 위하여 많은 전문인력이 연구에 참여하였고, 과학탐구 평가틀과 평가 문항을 개발하였다. 개발된 평가 문항을 여러 차례 수정보완한 후, 325개의 문항을 958명의 학생에게 예비 검사를 실시하여 현장 적용 가능성을 검토하였다. 예비 검사 결과 문항 특성이 만족스럽지 못한 문항은 삭제하여 240개의 문항을 본 검사 문항으로 확정하였다. 본 검사는 총 8,906명의 학생을 대상으로 실시하였으며, 검사결과를 고전검사이론과 문항반응이론에 의하여 분석한 결과 난이도, 변별도, 신뢰도 등이 매우 우수하다는 것이 판명되었다. 앞으로 본 연구에서 개발된 과학탐구 평가틀을 이용하여 더 많은 문항이 개발될 수 있으며, 이러한 문항을 이용하여 우리나라 학생들의 과학탐구능력을 주기적으로 점검할 수 있을 것이다.

• 과학교육연구지
• /
• 제37권2호
• /
• pp.278-293
• /
• 2013

이 연구에서는 2009 개정 교육과정에 따른 고등학교 융합형 '과학' 교과에서 사용된 선다형 평가 문항의 특성을 분석하였다. 문항의 출제 경향을 분석하기 위해 융합형 교과에 특이적인 분석틀을 구안하여 분석하였으며, 문항 반응 이론을 적용하여 문항의 특성을 양적으로 분석하였다. 문항의 출제 경향 분석 결과, 문항 출처, 융합 범위, 인지 수준 측면에서 융합형 '과학' 교과의 취지를 제대로 반영하고 있지 못하는 것으로 나타났으며, 기존 교육과정의 과학 교과와 같은 분과적 교수-학습 및 평가가 이루어지고 있음을 알 수 있었다. 문항 반응 이론을 적용한 분석 결과, 대체로 문항의 난이도는 적절하며, 변별도는 높은 수준인 것으로 나타났다. 하지만 분석틀을 구성하는 3개 범주와의 연관성은 나타나지 않았다. 이와 같은 연구 결과를 토대로 융합형 '과학' 교과의 취지를 반영한 교수-학습과 평가를 위한 개선점을 논의하였다.

• 과학교육연구지
• /
• 제38권3호
• /
• pp.670-690
• /
• 2014

이 연구는 고등학교 생명 과학 I의 지필평가 실태를 조사하기 위하여 일반계 고등학교 10개교를 임의로 선정하여 2013학년도 생명 과학 I의 문제지 33부(선택형 문항 690개, 서답형 문항 162개)를 분석하였다. 문항에 대해서는 Bloom의 신 교육목표 분류체계의 틀과 국가수준 학업성취도 평가의 과학과 평가틀에 근거하여 분류하였다. 선택형 문항의 경우 실제 정답률과 이원목적분류표에 제시된 난이도를 비교하였고, 서답형 문항의 경우 문항유형에 따른 문항 수와 배점을 비교하였다. 서답형 문항 중 서술형 문항에 대해서는 반응의 허용 정도, 자료 제시 여부, 출제 형식에 따라 구분하였다. 지필평가 문항 분석 결과, 서답형 문항의 비율이 19.0%로 선택형 문항의 비율(81.0%)보다 낮았다. Bloom의 신 교육목표 분류체계에 의한 분석 결과, 지식 차원에서 '개념적 지식'에 해당되는 문항이, 인지과정 차원에서 '이해하다'에 해당되는 문항이 많았다. 국가수준 학업성취도 평가의 과학과 평가틀에 의한 분석에서 '지식' 영역에 해당되는 문항이 '탐구' 영역에 해당되는 문항보다 약 9배 많았다. 선택형 문항에서 이원목적분류표에 제시된 난이도와 실제 정답률을 비교한 결과, 일치하는 비율은 41.5%였다. 서답형 문항의 유형에 따른 문항 수의 비율을 비교한 결과, 단답형 문항의 비율이 34.0%였고, 그리기 문항은 '세포와 생명의 연속성' 단원에서 주로 출제가 되었다. 서술형 문항에서 반응의 허용 정도에 따라 분류한 결과, 모두 '응답 제한형'에 해당되었고, 그 중 '내용범위 제한형'(67.3%)에 해당되는 문항이 가장 많았다. 그리고 자료 제시여부에 따라 분류한 결과 '자료 제시형'(65.4%)에 해당되는 문항이, 출제 형식에 따라 분류한 결과 '지식 서술형'(80.4%)에 해당되는 문항이 가장 많았다. 이 연구 결과를 통하여 학교 현장에서 '탐구' 영역에 해당되는 문항을 더 많이 출제할 필요가 있으며, 서술형 문항의 실제적 비중을 높이면서, 다양한 유형으로 출제할 필요가 있다고 생각된다.

• 한국지구과학회지
• /
• 제24권3호
• /
• pp.150-159
• /
• 2003

본 연구에서는 지구과학 지식과 창의력을 동시에 적용해야 해결할 수 있는 지구과학 창의력을 평가할 수 있는 문항의 개발 방법을 제시하고자 하였다. R&D과정을 거친 본 연구의 결과는 첫째, 조작적 정의를 통해 창의력과 과학창의력간의 인지능력 차이를 명료화하였고 둘째, 과학창의력을 구성하는 하위 요소들 중에서 문항 개발이 가능하다고 판단된 유창성, 융통성, 정교성, 독창성을 선정하여 각각에 대한 조작적 정의를 내린 후 각 요소들에 대한 평가와 채점의 준거를 제시하였다. 셋째, 평가도구의 구비 조건인 타당도, 신뢰도, 변별도, 난이도를 검증하기 위하여 3번의 현장검증을 실시하였으며, 본 연구에서 개발한 지구과학창의력 평가도구는 각 하위 요소별로 2문항씩 총 8문항으로 구성되어 있다. 넷째, 문항합치도 지수 평균은 .99, 문항 내적 합치도 지수인 Cronbach ${\alpha}$값은 .79, 각 문항별 평가자간 신뢰도는 0.78,각 하위 요소별 평가자간 신뢰도는 0.75, 변별도 지수인 점이연상관 지수는 .19, 문항 난이도 지수는 .00이었다. 이와 같이 평가도구의 구비조건들이 허용 범위 내에 있는 것으로 볼 때 본 연구에서 개발한 지구과학 창의력 평가도구는 유용한 것으로 판단할 수 있다.

• 과학교육연구지
• /
• 제34권1호
• /
• pp.164-174
• /
• 2010

이 연구의 목적은 중학교 과학 생물영역의 총괄 평가 문항의 평가 목표를 블룸의 신 교육목표분류체계에 따라 분류하여 평가 목표의 특성을 파악하는 것이다. 대구지역 중학교 25개교로부터 총 1,711개의 총괄 평가 문항을 수집하여 블룸의 신 교육목표분류체계에 따라 각 문항의 평가 목표를 분석하였다. 총괄 평가 문항을 지식과정 차원의 목표분류틀로 분석한 결과, 사실적 지식에 대한 평가를 목표로 하는 문항이 대부분(67.6%)을 차지하였다. 인지과정 차원에서 표본 문항의 평가 목표는 기억하는가를 평가하는 것이 가장 우세하였다(76.1%). 문항의 주된 평가 목표들이 블룸의 신교육목표 분류체계 중 특정 영역에 치우쳐 있었고, 동일한 분류체계로 수업 목표를 분류했던 이전의 연구 결과와 비교했을 때, 수업목표와 평가 목표의 분포에 차이가 있었다. 학년별 문항의 평가 목표 수준을 분석한 결과, 학년이 올라감에 따라 변하는 인지 수준을 고려하여, 평가 목표를 선정하여야 함에도 불구하고 문항의 평가 목표에서 학년별 차이는 발견할 수 없었다.

• 영재교육연구
• /
• 제16권1호
• /
• pp.81-100
• /
• 2006

본 논문에서는 초등정보과학영재의 선발을 위한 평가문항을 개발하고 학교 현장에 적용한 결과를 분석하여 개발 문항의 타당도를 검증하였다. 이를 위하여 다음과 같은 단계를 통하여 연구를 진행하였다. 첫째, 다양한 측면에서 정보과학영재에 대한 특성을 분석한 후 정보과학영재를 정의하였다. 둘째, 제7차 초등수학교육과정 속의 이산수학적 요소를 분석하여 초등정보과학영재의 선발을 위한 평가문항을 개발하였다. 셋째, 개발한 평가문항을 학교현장에 투입하여 다양한 관점의 결과를 분석하였다.