• Journal of the Korean Data and Information Science Society
• /
• 제25권3호
• /
• pp.567-578
• /
• 2014

이 연구는 Rasch 모형을 적용하여 우리나라 엘리트 선수의 도핑 사고성향 분석을 위한 PEAS의 타당도를 검증하는데 목적이 있다. PEAS (performance enhancement attitude scale)는 Petroczi (2006)이 제시한 선수들의 도핑 (doping)에 대한 사고방식과 성향을 측정하는 척도로 17문항 6점 척도로 구성되어 있다. 국가대표 엘리트 선수 438명을 대상으로 측정하였고, Rasch 모형을 적용하여 타당도를 분석하였다. 우선 Rasch 모형의 기본가정인 일차원성을 검증하기 위해 SPSS 프로그램을 적용하여 주성분분석을 실시하였다. 문항의 적합도 검증과 측정척도 범주의 타당도, 그리고 성별에 따른 차별기능문항을 추출하기 위해 Winsteps 프로그램을 이용하였다. 분석에 모든 유의수준은 .05로 설정하였다. 자료분석 결과는 다음과 같다. 첫째, 총 17문항으로 구성된 PEAS는 일차원성을 만족하는 것으로 나타났다. 둘째, 응답범주 수의 타당도는 6점척도보다 5점척도가 더 적합한 것으로 나타났다. 셋째, 문항의 적합도는 17문항 중 7문항 (문항1, 문항9, 문항10, 문항12, 문항13, 문항14, 문항17)이 통계적으로 적합하지 못한 것으로 나타났다. 넷째, 성별에 따른 차별기능문항 분석 결과 3문항 (문항3, 문항12, 문항13)이 추출되었다. 따라서 이 연구에서 우리나라 엘리트 선수의 도핑 사고성향분석을 위한 PEAS는 9문항 5점척도가 타당한 것으로 구명되었다.

• 과학교육연구지
• /
• 제38권3호
• /
• pp.670-690
• /
• 2014

이 연구는 고등학교 생명 과학 I의 지필평가 실태를 조사하기 위하여 일반계 고등학교 10개교를 임의로 선정하여 2013학년도 생명 과학 I의 문제지 33부(선택형 문항 690개, 서답형 문항 162개)를 분석하였다. 문항에 대해서는 Bloom의 신 교육목표 분류체계의 틀과 국가수준 학업성취도 평가의 과학과 평가틀에 근거하여 분류하였다. 선택형 문항의 경우 실제 정답률과 이원목적분류표에 제시된 난이도를 비교하였고, 서답형 문항의 경우 문항유형에 따른 문항 수와 배점을 비교하였다. 서답형 문항 중 서술형 문항에 대해서는 반응의 허용 정도, 자료 제시 여부, 출제 형식에 따라 구분하였다. 지필평가 문항 분석 결과, 서답형 문항의 비율이 19.0%로 선택형 문항의 비율(81.0%)보다 낮았다. Bloom의 신 교육목표 분류체계에 의한 분석 결과, 지식 차원에서 '개념적 지식'에 해당되는 문항이, 인지과정 차원에서 '이해하다'에 해당되는 문항이 많았다. 국가수준 학업성취도 평가의 과학과 평가틀에 의한 분석에서 '지식' 영역에 해당되는 문항이 '탐구' 영역에 해당되는 문항보다 약 9배 많았다. 선택형 문항에서 이원목적분류표에 제시된 난이도와 실제 정답률을 비교한 결과, 일치하는 비율은 41.5%였다. 서답형 문항의 유형에 따른 문항 수의 비율을 비교한 결과, 단답형 문항의 비율이 34.0%였고, 그리기 문항은 '세포와 생명의 연속성' 단원에서 주로 출제가 되었다. 서술형 문항에서 반응의 허용 정도에 따라 분류한 결과, 모두 '응답 제한형'에 해당되었고, 그 중 '내용범위 제한형'(67.3%)에 해당되는 문항이 가장 많았다. 그리고 자료 제시여부에 따라 분류한 결과 '자료 제시형'(65.4%)에 해당되는 문항이, 출제 형식에 따라 분류한 결과 '지식 서술형'(80.4%)에 해당되는 문항이 가장 많았다. 이 연구 결과를 통하여 학교 현장에서 '탐구' 영역에 해당되는 문항을 더 많이 출제할 필요가 있으며, 서술형 문항의 실제적 비중을 높이면서, 다양한 유형으로 출제할 필요가 있다고 생각된다.

• Communications for Statistical Applications and Methods
• /
• 제1권1호
• /
• pp.206-214
• /
• 1994

본 논문은 1994학년도 부터 부활된 대학별고사 실시에 따른 문항분석, 표준 점수제 그리고 검사동등화의 문제점을 지적하기 위하여 교육측정이론의 기본 개념을 소개하는데 있다. 대학별고사의 타당성과 신뢰성을 보장받기 위하여는 양질의 문항제작이 우선하여야하며, 이를 위하여 문항분석은 종전에 사용하던 고전검사이론 보다는 문항반응이론을 이용하는 것이 바람직하다. 문항반응이론에 의한 문항분석은 피험자 집단의 특성에 의하여 문항특성이 달리 분석되지 않는 특징을 지니고 있기 때문이다. 문항이 논술형일 경우 채점자간 신뢰도와 채점자 내 신뢰도를 간과하여서는 안될 것이다. 다양한 선택과목을 채택하는 대학별 고사에서 입학 사정을 위하여 원점수를 사용하거나, 표준점수 혹은 검사동등화 방법을 이용하고 있으나 이는 교육측정이론에 위배된다. 다른 과목에 대한 인가의 능력을 상대비교 할 수 없으며, 표준점수와 검사동등화는 동일 능력에 대한 상대비교를 위한 방법이다. 특히 검사동등화는 동일 특성, 공정성, 모교집단 불변성, 대칭성을 전제한다. 표준점수제에 의하여 수험생들의 다른 능력을 상대 비교하는 방법은 다른 능력이 점수로 표현되기 때문에 가능하나 그 점수가 무엇을 의미하는 가를 분석할 때는 교육평가의 기본 철학에도 위배된다.

• 한국학교수학회논문집
• /
• 제15권2호
• /
• pp.281-297
• /
• 2012

수학과 평가는 학생들의 수학적 사고력과 성취도를 측정하는데 있다. 또한 이를 분석 활용하여 수학교육의 질을 높이는데 그 목적이 있다. 이러한 평가는 좋은 문항제작에서부터 시작된다. 이에 본고는 문항제작 관련 이론을 고찰하고, 교육목표에 따른 예시 문항과 문항제작시의 유의점을 살펴보며, 계획 단계, 초안 문항제작 단계, 검토 단계, 최종 문항제작 단계 등 단계별 문항제작의 실제를 안내하고자 한다.

• 컴퓨터교육학회논문지
• /
• 제9권6호
• /
• pp.11-18
• /
• 2006

본 연구는 2005년, 2006년 대학수학능력시험 직업탐구영역의 "컴퓨터 일반" 문항을 질적 연구와 양적연구로 분석하였다. 질적 연구로 내용 타당도 검사를 실시하고, 양적연구로 2-모수 문항 반응 모형에 근거한 베이지안(Bayesian) 1.0을 이용하여 문항의 난이도 및 변별도를 측정하였으며 고전검사이론 프로그램인 테스트안(Testan) 1.0을 이용하여 문항의 신뢰도 및 오답지를 분석하였다. "컴퓨터 일반" 영역의 문항들을 분석하여 문항의 질을 높이고 난이도의 정확한 예측을 하여 보다 신뢰도와 변별력 있는 문항을 개발하기 위한 자료로 제시하고자 한다.

• 공학교육연구
• /
• 제8권1호
• /
• pp.31-45
• /
• 2005

본 논문에서는, 강의 평가에 필요한 설문을 효과적이며 체계적으로 얻기 위한, 대표 문항 추출 방법을 비교하였다. 비교에 사용한 방법은 요인분석(Factor Analysis: FA), FCM(Fuzzy c-Means) 알고리즘과 군집분석(Cluster Analysis : CA) 등으로 이러한 방법들을 사용하여 고려할 수 있는 다양한 형태의 많은 문항들로부터 적은 수의 문항을 추출한다. 추출된 문항은 많은 수의 문항들이 형성하는 클러스터의 대표 문항을 이루고 있다. 이를 위해 여러 개의 설문지로부터 얻은 120 문항의 강의 평가서를 명지대학교 외 3 개 대학교 646명의 학생들에게 평가를 실시하여 데이터를 얻었는데 학생들은 주어진 문항에 대하여 "매우 그렇다", "그렇다", "보통이다", "그렇지 않다", "매우 그렇지 않다", 그리고 "해당 없다"까지의 6등급으로 응답하였다. 각 문항에 대한 학생들의 응답 성향을 분석하여 약 25문항을 추출하였다. 실험 결과 본 논문에서 비교 분석한 요인분석, FCM알고리즘과 군집분석 등의 기법은 매우 유사한 설문을 추출할 수 있었다.

• 한국영재학회:학술대회논문집
• /
• 한국영재학회 2003년도 춘계학술대회
• /
• pp.161-166
• /
• 2003

우리나라 영재교육에 대한 연구들은 대부분 영재아의 개념정의와 판별도구 개발, 영재발굴, 선발 및 그들의 교육에 편중되어 있는 반면 영재아들의 적응, 자기지각, 또래관계등 사회정서발달에 관련된 연구는 거의 이루어지지 못하고 있다 이에 본 연구는 과학영재아동의 개인 및 일상생활에서의 적응수준 및 성별에 따른 적응, 자기지각 및 사회적지지의 차이를 파악하며, 그들의 스트레스에 영향을 미치는 자기지각 및 사회적 지지 수준을 살펴보고 영재아의 사회적 성취나 적응에 도움을 줄 수 있는 방안을 모색하고자 한다. 본 연구의 연구문제는 다음과 같다. 첫째, 과학영재아동과 일반아동의 적응(개인적응, 사회적응, 부적응), 자기지각 및 사회적 지지는 차이가 있는가\ulcorner, 둘째, 과학영재아동의 적응, 자기지각 및 사회적 지지는 성별에 따라 차이가 있는가\ulcorner, 셋째, 과학영재아동의 스트레스에 영향을 미치는 자기지각, 사회적 지지 수준은 어떠한가\ulcorner 본 연구의 대상은 전라북도에 위치한 중학교 1학년 100명의 아동이며, 이들은 교사추천 및 전북대학교 과학영재연구소의 과학과 수학시험을 통해 선발된 과학 영재아동이다. 설문결과 불성실한 응답자를 제외한 총 39명(남아 59명, 여아 30명)이 최종 연구대상이 되었다. 본 연구의 측정도구로 아동의 적응능력검사도구는 한국교육평가센터(KETC)에서 1998년 개발하여 표준화과정을 마친 종합적응능력검사를 사용하였으며, 개인적응영역(자아개념 12문항, 성취동기 10문항, 자기기획 15문항), 사회적응영역(사교성 15문항, 애착 9문항, 사회적 긍정성 10문항), 부적응영역(스트레스 20문항, 욕구좌절 10문항, 편견 12문항) 총 113문항으로 구성되어 있다. 아동의 자기지각검사도구는 Harter(1985)의 Self-Perception Profile이며, 학업역량, 사회적역량, 운동역량, 신체외모역량, 행동품행역량, 자기가치감 각각 6문항씩 총36문항으로 구성되어 있다. 아동의 사회적 지지검사도구는 한미현(1996)이 제작한 척도를 사용하였으며 부모지지, 교사지지, 학교친구지지, 친한 친구지지 각각 6문항씩 총 24문항으로 구성되어 있다.

• 재활치료과학
• /
• 제10권3호
• /
• pp.97-110
• /
• 2021

목적 : 본 연구는 Parten의 사회적 놀이의 발달 단계를 바탕으로 학령전기 아동의 사회적 놀이를 측정할 수 있는 평가 문항을 개발하고자 하였다. 연구방법 : 문헌 고찰을 통해 Parten의 사회적 놀이의 발달 단계에 따른 조사 문항을 수집하였다. 이후 아동 작업치료 혹은 놀이와 관련된 치료 경력 7년 이상의 전문가 패널 22명을 대상으로 총 2회의 델파이 조사를 실시하였다. 전문가 패널에게 각 조사 문항에 대한 적절성 여부를 평정하게 한 후 학령전기 아동의 보호자를 대상으로 예비 문항의 내용에 대한 이해도 조사를 실시하였다. 보호자의 예비 문항 이해도 조사 후 전문가 자문 회의를 거쳐 평가 방법을 수립하였다. 결과 : 자료 수집과 델파이 조사를 통해 학령전기 아동의 사회적 놀이는 Parten의 사회적 놀이의 발달 단계인 6개 영역(몰입되지 않은 행동, 방관자적 행동, 혼자 놀이, 평행 놀이, 연합 놀이, 협동 놀이)으로 구성하였고, 몰입되지 않은 행동 12문항, 방관자적 행동 7문항, 혼자 놀이 14문항, 평행 놀이 16문항, 연합 놀이 17문항, 협동 놀이 23문항으로 총 89문항이 도출되었다. 델파이 조사의 평균 내용 타당도 비율은 0.85, 안정도 0.15, 합의도 0.78로 나타났다. 본 연구에서는 연합 놀이 17문항, 협동 놀이 23문항인 총 40문항을 최종 예비 문항으로 구성하였다. 결론 : 학령전기 아동의 사회적 놀이를 측정할 수 있는 평가 문항을 개발하고 내용 타당도를 검증하였다. 향후에는 평가 문항에 대한 타당도를 검증하여 임상에서 평가도구로써 활용되기를 기대한다.

• 한국과학교육학회지
• /
• 제22권1호
• /
• pp.122-131
• /
• 2002

본 연구는 수행 평가 방식의 중요성이 대두됨에 따라 실지로 수행형 평가 문항이 전통적인 선다형 평가문항에 비해 어떤 학생들에게 어떻게 유용한지를 분석한 연구이다. 이를 위하여 제 3차 수학 과학 성취도 국제비교 반복 연구에 사용된 선다형과 수행형 평가문항들을 내용영역별로 분석하여, 수행형의 평가문항과 선다형의 평가문항의 효율성을 비교 분석하였다. 자료분석 결과 수행형의 문항이 선다형의 문항에 비하여 학생들의 능력을 더 정확하게 추정함으로써 효율성이 높은 것으로 나타났다. 특히 환경이나 과학의 본성 영역에 비하여 지구과학, 생물, 물리와 화학 영역에서 수행형의 문항이 선다형의 문항에 비하여 학생들의 능력을 더 정확하게 추정하고 있음을 보여주었다. 또한 선다형의 문항에 비하여 적은 수의 문항으로 학생들의 능력을 추정함에도 불구하고 추정오차가 적어, 적은 수의 수행형 문항으로도 학생들의 능력을 정확하게 추정할 수 있음을 시사하고 있다.

• 대한수학교육학회지:수학교육학연구
• /
• 제23권2호
• /
• pp.193-212
• /
• 2013

본 연구의 목적은 선택형 문항 제작 전문성 향상 연수에 참여한 고등학교 수학교사들의 경험을 바탕으로 평가 문항 제작 전문성 향상 연수 프로그램의 효과 제고 요인을 밝히기 위한 것으로, 이를 위하여 사례연구를 실시하였다. 연수 한 팀에 교사 5명이 참여하였고 연수 후 포커스 그룹 인터뷰를 실시하였다. 두 차례의 포커스 그룹 인터뷰 자료에 대한 질적 분석을 통해 선택형 평가 문항 연수의 효과 제고 요인을 도출하였다. 연구 결과로 연수 프로그램 효과 제고 요인은 집중 훈련 가능한 프로그램 구조(소규모 인원의 협력학습, 적정량의 집중적인 훈련), 문항 제작 습관 표면화와 수정(사전과제를 통한 문항 제작습관 표면화, 문항 제작에 대한 즉각 피드백), 교사간 공감대 형성(적극적인 학습태도, 문항 제작 과정 공유), 평가 문항 제작 전문성에 대한 자기 성찰(문항 제작 과정에 대한 반성, 문항 제작 전문성 중 취약점 자각)이었다. 이러한 요인을 바탕으로 평가 문항 제작 전문성 향상 연수 프로그램 개발을 위한 시사점을 도출하였다.