• 영재교육연구
• /
• 제25권2호
• /
• pp.237-259
• /
• 2015

이 연구는 음악(국악)영재 담당교사가 지녀야 할 자격 조건을 수렴하고, 수렴된 조건을 바탕으로 평가문항을 제작한 후, 그 문항에 대한 구인타당화를 도모함으로써 음악(국악)영재의 선발 및 교육과정 운영을 위한 토대를 마련하고 궁극적으로는 예술영재교육의 내실화 및 체계화를 도모하기 위하여 수행되었다. 음악(국악)영재 담당교사 평가문항의 문항분석을 위하여 탐색 및 확인적 요인분석을 실시하였고, 내적일관성 신뢰도를 추정하였다. 요인분석 결과 최종 41문항을 수렴하였고, 전통음악을 포함한 음악영재 담당교사가 지녀야 할 심리학적 구인을 확인할 수 있었다. 또한 평가문항에 대한 내적일관성 신뢰도 추정 결과 높은 신뢰도 수준(r=.974)을 확보할 수 있었다. 이 연구의 결과는 음악(국악)영재 담당교사 평가문항이 영재교육 현장에 즉시 투입 가능한 교사 평가도구임을 반영해준다.

• 한국가정과교육학회지
• /
• 제24권2호
• /
• pp.135-154
• /
• 2012

본 연구의 목적은 2002년도부터 2011년도까지 10년간의 가정과 '임용시험 문항'(이하 '총 문항'이라 칭함)을 대상으로 분야별 출제 비율 분석, 평가 내용 요소(이하 '평가 요소'라고 칭함)에 따른 문항 분석, 임용 상세화 기준 개발 이전과 이후의 분야별 평가 내용 요소를 분석하는데 있다. 연구 결과를 요약하면 다음과 같다. 첫째, 가정과교육학 분야의 분석 결과 총 문항 중 30.9%의 비중을 차지했으며, 최근에는 35%의 출제 비율을 보이고 있다. 평가 요소별 출제 비율을 보면 '가정과 교수 학습 방법의 실제'(33.2%)가 가장 높았으며, '가정과교육의 본질'(3.2%)은 가장 낮았다. 둘째, 식생활 분야의 분석 결과 총 문항 중 17.5%의 비중을 차지했으며, 최근에는 15%의 출제 비율을 보이고 있다. 평가 요소별 출제 비율을 보면 '조리원리 실습'(26.1%)이 가장 높았으며, '식생활 문화'(3.7%)는 가장 낮았다. 셋째, 의생활의 분야의 분석 결과, 총 문항 중 15%의 비중을 차지했으며 최근에는 12.5%의 출제 비율을 보이고 있다. 평가 요소별 출제비율을 보면 '의복 관리'(25.1%)와 '의복 및 생활용품 제작'(25.1%)이 가장 높았으며, '의복의 선택과 자기표현'(3.0%)은 가장 낮았다. 넷째, 주생활 분야의 분석 결과, 총 문항 중 11%의 비중을 차지했으며 최근에는 12.5%의 출제 비율을 보이고 있다. 평가 요소별로는 '주거생활문화의 이해'(22.5%)가 가장 높고, '주거실내디자인의 이해'(10.7%)는 가장 낮았다. 다섯째, 소비생활 분야의 분석 결과, 총 문항 중 12.4%의 비중을 차지했고, 최근에는 12.5%의 출제 비율을 보이고 있다. 평가 요소별 출제 비율을 보면 '가정자원관리'(34%)가 가장 높았으며, '생애설계와 가정복지'(0%)에서는 전혀 출제되지 않았다. 여섯째, 가족생활 분야의 분석 결과 총 문항 중 13.3%의 비중을 차지했고, 최근에는 12.5%의 출제 비율을 보이고 있다. 평가 요소별 출제 비율은 '가족에 대한 이해와 가족의 변화'(23.8%)가 가장 높았고, '결혼과 가족발달'(2%)은 가장 낮았다. 마지막으로, 전반적으로 임용 상세화 기준의 개발은 가정과 중등 임용 시험의 평가 영역별 내용 요소의 균등화와 다양화의 문제를 다소 완화하였다.

• 한국가정과교육학회지
• /
• 제23권3호
• /
• pp.69-90
• /
• 2011

본 연구는 중학교 기술 가정 교과 의생활 영역을 중심으로 타당도 신뢰도 높은 서술형 평가 문항을 개발하여, 이를 학생들에게 적용해보고, 평가 결과를 분석해보는 것에 목적을 두었다. 이를 위해 평가할 내용을 분석하고, 평가 문항을 설계 개발하여 평가를 실시한 후 그 결과를 분석하였다. 목표 이원분류표와 평가 영역 및 평가 목표 설정을 토대로 서술형 평가 문항 초안을 작성하였고, 채점 기준표와 예시답안을 함께 작성하였다. 전문가 검토와 예비 검사를 거쳐, 최종적으로 서술형 평가 문항 총 23개를 완성하였으며, 이를 중학교 2학년 2개 학급 총 65명을 대상으로 본 검사를 시행하고 분석하였다. 본 연구의 결과, 서술형 평가 문항의 타당도는 각 문항별로 비교적 높게 나타났다. 채점자간 신뢰도는 세 채점자간에 강한 상관관계가 있는 것으로 나타나 개발된 평가 문항은 타당하고 신뢰할 만한 문항이라고 할 수 있다. 반면, 개발된 서술형 평가 문항에 대한 학업 성취도는 전반적으로 낮았다. 즉, 알고 있는 지식을 자신의 언어로 표현해서 서술하는 것과 정확하고 구체적인 답안을 작성하는 것을 힘들어했다. 또한 서술형 평가에 대해 비교적 긍정적으로 인식하고 있었으나, 서술하는 것에 대한 어려움, 학습량의 증가 등이 학생들에게 서술형 평가를 부담스러워 하는 것으로 인식하였다. 따라서 서술형 평가 방식을 통한 학생들의 평가가 보다 효율적이고 변별력 있게 시행되기 위해서는 서술형 평가를 위한 별도의 학습이나 훈련이 반드시 필요하다고 볼 수 있다. 이를 위해 앞으로 학생들은 수업시간을 통해서 교과 내용과 관련된 교과서 이외의 다양한 자료를 접해보고, 주어진 문제의 해결 방법에 대해 자신의 생각을 정리해보며, 사고를 확장시키고, 이를 글로 서술하여 표현해보는 연습이 요구된다. 그러므로 서술형 평가가 학교 현장에서 공정하고 객관성 있게 시행되기 위해서는 타당도 신뢰도 높은 평가 문항의 개발이 더욱 활발히 이루어져야 하고, 평가 문항의 개발과 관련된 교사들의 자발적이고 적극적인 연수와 연찬을 제안해 본다.

• 한국정보교육학회:학술대회논문집
• /
• 한국정보교육학회 2010년도 동계학술대회
• /
• pp.149-156
• /
• 2010

컴퓨터와 인터넷이 보편화된 지금 학교현장에서는 효율적인 통계 분석이 가능하고, 공간적 시간적 제약을 극복한 웹 기반 교원능력개발평가 시스템이 필요하다. 본 논문에서는 현재 웹 기반으로 이루어지고 있고 교원평가 시스템을 비교 분석하여 그 특징을 알아본 후 그 제한점을 극복하고 사용자의 사용성 향상을 위한 웹 기반 교원능력개발평가 시스템을 제안하고 설계한다. 본 논문에서 제안하고 설계한 교원능력개발평가 시스템의 사용성 향상 요소는 크게 세 가지이다. 첫 번째는 평가문항별 키워드를 레이어 방식으로 설명하여 평가자의 평가문항 이해를 돕는 것이다. 두 번째는 평가자를 위해 평가보조자료를 첨부하여 공정하고 객관적인 교원능력개발평가가 이루어지도록 하는 것이다. 세 번째는 통계 처리가 힘든 서술형 문항에 키워드별 분류 기능을 추가하여 교원의 자기 발전의 자료로 활용하도록 하는 것이다. 이러한 웹 기반 교원능력개발평가 시스템은 학교 교육의 질 향상 및 공교육에 대한 신뢰를 제고하는데 기여할 수 있다.

• 한국사회복지학
• /
• 제59권4호
• /
• pp.273-296
• /
• 2007

본 연구는 장애정체감을 평가하는 도구로 개발된 23문항의 척도를 Rasch 모형을 적용하여 문항을 재구성한 연구이다. 척수손상 장애인 397명을 대상으로 개발한 장애정체감 척도(이익섭 신은경, 2006)는 요인분석으로 타당도를 검증한 것으로 문항의 적합도나 난이도 및 응답범주의 적절성을 평가하지는 못하였다. 본 연구에서는 요인분석 절차에서 파생될 수 있는 한계를 보완하고자 문항반응이론(item response theory)의 하나인 Rasch 모형을 각 하위차원별로 적용하여 장애정체감 척도를 재검토하였다. 결과로는 4개차원의 20문항으로 축소되는 것이 문항의 적합도가 높은 것으로 나타났으며, 문항의 난이도 측면에서는 평균수준의 문항이 많은 것으로 드러났다. 응답범주는 4점 척도가 적절했다고 평가되었다. 이러한 척도의 재구성을 통하여 장애정체감의 문항 적합도와 난이도 및 응답범주의 적절성을 객관적으로 평가할 수 있었다.

• 한국정보통신학회:학술대회논문집
• /
• 한국해양정보통신학회 2000년도 춘계종합학술대회
• /
• pp.268-273
• /
• 2000

기존의 웹 기반 학습 평가 시스템은 학습자의 선택 기회가 없는 상태에서 일방적으로 제시된 문제지로 평가하게 되거나, 문제 은행에서 임의로 추출한 문제도 단순히 무작위로나 난이도만을 고려하여 문제지를 구성하였고, 그 결과에 대한 성취도의 분석도 한 문제지에 대한 정오표 또는 점수로 단순하게 제시하기 때문에 학습자의 지속적인 학습 관리가 이루어지지 못하고 있다. 본 논문에서는 문제유형, 과목 및 단원 난이도, 문항 형태, 문항당 배점, 문항당 배당 시간등의 다양한 정보를 가진 유형별 문제 은행을 구축하였다. 학습자는 마치 문제집을 풀고 싶은 유형의 문제를 선택하듯이 문제 은행에서 문제를 자율적으로 구성하여 평가할 수 있는 유형별 문제지나 대학수학능력시험의 기준에 맞추어 자동 구성되는 종합 문제지로 다양하게 평가할 수 있다. 또한, 한문제지에 대한 결과뿐만 아니라 유형별, 월별 성취도 분석을 통하여 평가한 총점에 대한 획득한 점수의 누적 통계를 그래프로 일목요연하게 보여주어 한 학습자에 대한 지속적인 성취도 분석이 가능하도록 구축하였다.

• 대한수학교육학회지:수학교육학연구
• /
• 제23권3호
• /
• pp.389-406
• /
• 2013

본 연구는 수학과 서술형 평가에서 나타난 중학교 2학년 학생들의 오류 유형을 문항별, 학습 수준별로 분석함으로써 효과적인 교수 학습 과정을 촉진하기 위한 기초자료를 제공하는 것을 목적으로 한다. 총 99명의 중학교 2학년 학생들의 문항 반응을 분석한 결과, 수학적 사고와 표현, 현실 맥락과 연결된 문항 혹은 수학 내용들이 연결된 문항 등에서 다양한 오류가 나타났으며 단일 오류뿐만 아니라 복합적인 오류 유형도 발견되었다. 학습 수준에 따라서도 상위 수준의 학생들은 복합적 오류 보다는 단일 오류가, 중하위 수준의 학생들은 복합적인 오류가 더 빈번히 나타났으며 오류 유형도 다양하였다. 이러한 결과는 문항의 유형별, 학습 수준별 학생들의 오류 패턴을 보여주는 것으로 향후 학생들의 오류를 수정하고 수학 학습을 촉진할 수 있는 서술형 평가 문항과 교수법 개발에 도움이 될 수 있을 것이다.

• 한국도서관정보학회지
• /
• 제54권4호
• /
• pp.85-104
• /
• 2023

본 연구는 사서교사 임용시험에 출제된 시험 문항의 영역, 내용 및 평가 요소 등을 분석하여 임용시험의 개선 방안을 제시하는데 목적이 있다. 이를 위해 한국교육과정평가원에서 제공하고 있는 2002년 이후 사서교사 임용시험 문제를 수집하여 영역별 출제 빈도를 분석하였다. 분석결과, 학교도서관 운영 106문항(21.95%), 분류학과 정보검색 각 63문항(13.04%), 도서관 전산화 59문항(12.22%), 독서지도론 58문항(12.01%), 목록학과 정보봉사론 각 56문항(11.59%), 정보매체론 18문항(3.73%) 순으로 출제 빈도를 확인할 수 있었다. 이어서 최근 10년간(2014~2023학년도) 임용교사 출제 영역을 사서 전문성과 학교도서관 실무영역으로 구분하여 출제 빈도를 분석한 결과, 사서 전문성 관련 문항은 총 149문항(66.22%), 학교도서관 실무 관련 문항은 총 76문항(33.78%)으로 확인되었다. 이를 토대로 평가영역 및 평가요소의 갱신, 정보매체론 영역의 확대, 안정적이고 지속적인 교원 수급 정책의 필요성을 제안하였다.

• 과학교육연구지
• /
• 제48권1호
• /
• pp.31-46
• /
• 2024

이 연구는 TIMSS 2019에서 도입된 문제해결 및 탐구 과제(PSIs)에 대한 우리나라 초등학교 4학년 학생들의 학업성취 특성을 분석하였다. TIMSS 2019에서는 기존의 지필 평가와 더불어 컴퓨터 기반 평가를 실시하였는 데, 문제해결 및 탐구 과제는 컴퓨터 기반 평가에만 포함되어 있어 컴퓨터 기반 평가에 참여한 30개국의 평가 결과를 분석 대상으로 하였다. 문제해결 및 탐구 과제(PSIs)는 여러 개의 문항으로 구성된 문항군으로, 내용 영역과 인지 영역을 통합하여 문항을 구성하고, 선다형보다는 구성형 문항이 다수를 이루고 있다. 분석 결과, 문제해결 및 탐구 과제(PSIs) 포함 여부에 따라 국가별로 학생들의 학업성취도에 차이가 있었는데, 우리나라는 학업성취도 평균이 1점 하락하였다. 아울러 개별 문항에 대한 분석 결과를 보면, 학생들의 학업성취도가 다소 낮게 나타났고, 다수 문항에 대해 여학생의 정답률이 남학생에 비해 낮게 나타났다. 아울러 문항별 분석 결과를 보면, 영국이나 핀란드 등의 정답률이 기존의 학업성취도 상위국(싱가포르, 대만, 우리나라)보다 높게 나타나는 문항이 있었다. 융합교육이 강조되는 최근 실정을 감안할 때 우리나라에서도 평가에 문제해결 및 탐구 과제를 활용하는 방안을 검토할 필요가 있어 보인다.

• 한국교육논총
• /
• 제38권1호
• /
• pp.29-39
• /
• 2017

본 연구는 2009 개정 과학과 교육과정에 근거한 중학교 과학 교과서의 산염기 및 산화 환원 단원의 문항을 블룸의 교육목표 분류틀을 이용하여 분석한 것이다. 분석 결과 모든 출판사의 교과서 문항에서는 지식 영역의 요소가 가장 많이 나타났으며, 이해, 적용, 분석, 종합, 평가 순으로 그 요소는 적게 나타났다. 그리고 출판사에 따라 각 문항에 나타난 인지 영역의 하위 영역이 골고루 포함되지 않았다. 그래서 학교에서는 다양한 출판사의 교과서 단원평가 문항을 참조하여 수업에 이용할 필요가 있다.