• 인지과학
• /
• 제33권1호
• /
• pp.77-93
• /
• 2022

선행 연구들에서는 그럴듯한 기준점이 극단적 기준점보다 더 큰 기준점 효과를 야기하는 반면, 주어진 문항과 관련된 개인의 지식수준이 높으면 기준점 효과가 작아진다고 보고하고 있다. 하지만 제시되는 기준점이 그럴듯한지 여부와 주어진 문항 자체의 난이도가 기준점 효과에 미치는 영향을 함께 살펴본 연구는 없었다. 따라서 본 연구에서는 기준점의 극단성과 문항의 난이도가 기준점 효과에 미치는 영향을 살펴보았으며, 이에 더해 응답 확신도와 기준점 효과의 관계도 살펴보았다. 이를 위하여 예비 연구를 통해 쉬운 문항과 어려운 문항, 그럴듯한 기준점과 극단적인 기준점을 선정하였다. 본 실험은 '표준 기준점 실험 절차' 에 따라 진행되었다. 연구 결과, 기준점의 극단성과 문항의 난이도는 각각 기준점 효과에 영향을 미쳤으며 문항의 난이도는 응답 확신도에도 또한 영향을 미쳤다. 구체적으로, 그럴듯한 기준점을 제시했을 때와 어려운 문항을 제시했을 때에 기준점 효과가 크게 나타났다. 또한 자신의 수행에 대한 확신이 낮을수록 극단적인 기준점이 제시되었을 때 기준점의 영향을 크게 받았다. 이러한 결과는 기준점이 그럴듯한지와 문항의 난이도에 따라 기준점 효과의 크기와 확신 정도, 그리고 기준점 효과와 확신도 사이의 상관관계가 다르게 나타난다는 것을 보여준다. 본 연구의 결과는 기준점의 특성이나 개인의 상태에 따라 기준점 효과가 달라진다고 제안하는 기준점 효과에 관한 태도 변화 관점을 뒷받침한다.

• 한국멀티미디어학회논문지
• /
• 제10권7호
• /
• pp.912-922
• /
• 2007

원격교육 시스템의 평가 시스템에서 평가의 공정성을 위하여 매 평가 시 평가지의 난이도를 일정하게 유지할 수 있는 방법이 요구된다. 본 논문에서는 유전자 알고리즘 기반의 평가지 생성 알고리즘을 제안한다. 평가지의 각 문항에 대한 난이도가 제출자에 의해서 지정되는 기존의 방법과는 달리 제안한 알고리즘에서는 각 문항의 난이도가 학생들의 평가 결과에 따라 적응적으로 조절되고, 평가지의 평균 난이도를 일정한 수준으로 유지할 수 있다. 제안한 알고리즘에서는 평가지에 동일한 문항이 중복으로 포함되는 것을 배제하고, 이전 평가의 결과를 반영하여 적응적으로 난이도가 조절될 수 있는 새로운 형태의 유전 연산자를 설계하고 구현한다. 그리고 모의실험을 통해 기존의 임의선택 방법과 모의 담금질 방법에 비해 균일한 난이도를 갖는 평가지가 생성될 수 있음을 보인다.

• 대한수학교육학회지:학교수학
• /
• 제9권2호
• /
• pp.223-240
• /
• 2007

본 연구는 중학생들의 수학 성취를 국가수준에서 평가한 경험적 자료를 활용하여 우리나라 중학교 수학과 교육과정의 내용과 수학에서의 인지행동이 위계적으로 구성되어 있는지를 조사하였다. 전반적으로 교육과정의 내용 제시 순서는 난이도 순위와 통계적으로 유의한 상관관계가 나타나지 않은 반면, 인지행동의 위계는 난이도 순위와 통계적으로 유의한 상관관계가 있었다. 이러한 결과에서 검사 문항의 난이도 순위가 학교에서 배운 수학 교과 내용의 순서보다는 문항에서 요구하는 인지행동의 수준과 더 관련이 있음을 알 수 있었다. 그리고 내용 위계와 인지행동의 위계 간 상관관계가 유의하게 나타나, 교육과정에서 늦게 등장하는 내용일수록 요구되는 인지 행동도 높은 수준임을 발견할 수 있었다. 내용 및 인지행동의 위계와 난이도 순위 간 상관분석에서 특이한 양상을 나타낸 문항에 대해서는 그 특성을 분석하였다.

• 인터넷정보학회논문지
• /
• 제10권5호
• /
• pp.145-152
• /
• 2009

학습과정이나 맞춤형 학습과 같은 애플리케이션에서는 학습자에 맞는 상호작용에 의한 학습자 모델 결과를 신뢰할 수 있어야 한다. 이에 CAT(Computer Adaptive Testing)는 학습정보를 최대화하기 위해 학습항목을 관리할 수 있어서 유용하게 사용된다. 본 연구는 학습자 중심의 문항추천 프로세스를 설계하였다. 이는 CAT에서 활용되어질 수 있으며, 각 프로세스의 전개방법은 정형화 언어인 CSP를 사용하였다. 또한 문항추천 방법은 문항반응이론의 문항난이도를 이용하였으며, 학습자는 다음 학습의 문제 난이도 조정을 위해 난이도 변경단계를 설정할 수 있도록 하였다. 이러한 방법을 통하여 기존의 방법과 비교함으로서 그 구조적인 차이를 제시하였다.

• 대한수학교육학회지:수학교육학연구
• /
• 제14권1호
• /
• pp.71-88
• /
• 2004

본 연구의 목적은 대학수학능력시험에서 출제되는 수리 영역의 문항에 대한 난이도를 결정짓는 변인을 탐색하고, 난이도를 측정할 수 있는 구체적인 검토도구를 개발하는 것이다. 이를 위해 문헌 분석과 기출 수능 문항에 대한 내용 및 난이도 분석을 시도하였다. 여기서 추출된 변인을 토대로 1차 검토도구를 만들고 오답률과 추출된 변인들 사이의 상관분석을 시도하여 상관도가 비교적 낮은 변인은 삭제하거나 수정 보완하여 2차 검토도구를 만들었다. 2차 검토도구를 이용하여 여러 가지 예측 모형을 개발하고, 각 모형에 대하여 회귀계수를 비교하고, 교차타당도를 분석한 결과 안정성과 정확성이 가장 높은 최적의 예측모형은 '통합 회귀방정식 모형'으로 나타났다. 또한 통합 회귀방정식 모형을 토대로 분석하였을 때 오답률에 대한 설명력은 답지의 형식, 내용 영역, 행동 영역, 문항의 생소성 등의 순으로 나타났다. 본 연구는 난이도 관련 변인에 대한 연구가 전무한 상태에서 이루어졌기 때문에 많은 한계가 있으며 추후에 난이도를 보다 정확하게 추정할 수 있는 연구 방법이 기대 된다.

• 컴퓨터교육학회논문지
• /
• 제10권4호
• /
• pp.39-49
• /
• 2007

본 연구는 대학수학능력시험 직업탐구영역의 "정보기술기초" 교과의 문항 특성 및 문항 양호도 분석을 통해 양질의 문항을 개발하기 위한 분석 자료로 제시하고자 한다. 질적 연구로 내용 타당도 분석을 하였고, 양적 연구로 문항의 난이도, 변별력, 신뢰도 및 오답지 분석을 하였다. 2005년, 2006년 "정보기술기초" 교과 문항 분석결과, 교과 내용이 골고루 출제되었으나 행동영역에 대한 기준이 제고될 필요가 있었다. 또한 "정보기술기초" 교과 문항이 대학수학능력시험에 적합하도록 양질의 문항 개발이 필요하였다. 그러기 위해서는 적절한 난이도와 변별력 있는 문항 개발에 대한 연구가 필요함을 알 수 있다.

• 영재교육연구
• /
• 제22권1호
• /
• pp.117-139
• /
• 2012

이 연구의 목적은 Peer Instruction 수업을 통해 문항의 난이도에 따른 과학영재의 인지갈등의 특성을 알아보고, 일반 학생들의 인지갈등 정도와 비교 분석하였다. 서울시와 경기도 소재 교육청 부설 영재교육원 과학영재학생 49명, 일반 중학교 학생 71명을 대상으로 빛의 직진 및 합성에 관한 개념 검사에 대해 동료 토론 전 후의 인지갈등 검사를 실시하였다. 과학영재는 인지적 재평가 요인 측면에서는 문항의 난이도와 관계없이 동료와의 토론 후 유의미하게 인지갈등이 감소했다. 과학 영재는 동료에 대한 신뢰가 높은 편이었으며 동료와 토론하는 동안 자신의 개념을 동료에게 설명하면서 머릿속의 개념을 명료화할 수 있고 반성적 사고를 하게 되므로 갈등이 해소되어 인지갈등이 감소한 것으로 나타났다. 문항의 난이도가 높아질수록 과학영재는 일반학생과 같이 동료 토론 전에 불안 정도가 높았지만, 일반학생에 비해 그 불안 정도는 낮았고, 동료 토론 후에 불안 정도는 통계적으로 유의미하게 감소함을 알 수 있었다. 과학영재의 인지갈등변화를 분석한 결과를 바탕으로 과학영재의 학습자 특성을 고려한 다양한 인지갈등 전략의 개발과 적용이 필요하다는 것을 알 수 있다. 또한 과학영재를 위한 개념검사 문항을 개발할 때, 문항의 난이도에 대한 고려 사항에서 본 연구의 결과는 시사하는 바가 크다고 할 수 있다.

• 재활복지
• /
• 제20권4호
• /
• pp.135-156
• /
• 2016

이 연구의 목적은 아동기 자폐증 평정척도(CARS)에 대한 평정자의 타당한 평가가 가능토록, Rasch 평정척도모형을 적용하여 문항의 적합성과 난이도를 검증하는 데에 있다. 이를 위해 CARS 평정이 신뢰롭다고 판단된 발달장애인 238명의 자료를 분석하였고, 이때 CARS의 평정은 장애인복지관 치료사에게 교육을 받은 부모가 기입하도록 하였다. 이 연구에서 설정한 연구문제를 검증하기 위해 Rasch 평정척도모형을 적용하였고, Rasch 모형 적용을 위한 일차원성 가정은 PCAR 검증을 통해서, 문항의 적합성과 난이도는 jMetrik 4.03 프로그램을 통하여 추정하였다. 그 결과, 첫째, CARS의 문항 응답범주는 문제가 있는 것으로 나타나, 기존 7점 범주 대신 5점 범주로 수정이 필요하다. 둘째, CARS의 문항 적합도를 살펴본 결과, 집단에 따라 부적합 혹은 과적합한 문항이 존재하였다. 특히 자폐증 진단 대상자 통합 집단에서 Q11 문항만이 부적합하게 나타나, CARS 평정을 위한 교육을 보다 체계적으로 수행할 필요가 있다. 셋째, CARS 문항에 대한 개인 속성점수와 난이도를 비교한 결과, Q2, Q3, Q10, Q11 문항에 대한 개념적 정의를 보다 세부적으로 구분할 필요성이 있다. 넷째, CARS 문항에 대한 난이도를 살펴본 결과, 평정자인 부모가 지각하는 자폐증 집단의 가장 심대한 문제는 언어적 의사소통으로 나타났다.

• 한국사회복지학
• /
• 제59권4호
• /
• pp.273-296
• /
• 2007

본 연구는 장애정체감을 평가하는 도구로 개발된 23문항의 척도를 Rasch 모형을 적용하여 문항을 재구성한 연구이다. 척수손상 장애인 397명을 대상으로 개발한 장애정체감 척도(이익섭 신은경, 2006)는 요인분석으로 타당도를 검증한 것으로 문항의 적합도나 난이도 및 응답범주의 적절성을 평가하지는 못하였다. 본 연구에서는 요인분석 절차에서 파생될 수 있는 한계를 보완하고자 문항반응이론(item response theory)의 하나인 Rasch 모형을 각 하위차원별로 적용하여 장애정체감 척도를 재검토하였다. 결과로는 4개차원의 20문항으로 축소되는 것이 문항의 적합도가 높은 것으로 나타났으며, 문항의 난이도 측면에서는 평균수준의 문항이 많은 것으로 드러났다. 응답범주는 4점 척도가 적절했다고 평가되었다. 이러한 척도의 재구성을 통하여 장애정체감의 문항 적합도와 난이도 및 응답범주의 적절성을 객관적으로 평가할 수 있었다.

• 한국지능시스템학회:학술대회논문집
• /
• 한국퍼지및지능시스템학회 2000년도 춘계학술대회 학술발표 논문집
• /
• pp.21-26
• /
• 2000

인간의 잠재적 능력을 측정하기 위하여 많은 검사가 이루어진다. 이러한 검사를 위하여 양질의 문항 제작이 필수적이다. 그러나 문항 제작의 중요성을 인식하지 못하고 단시간에 쉽게 제작된 문항들을 쓰고 폐기하는 경우가 많다. 본 논문에서는 양지르이 문항 제작을 위하여 문항 내용 분석, 문항 응답 자료 분석, 문항 난이도, 문항 변별도, 문항 추측도, 오답의 능률도를 이용하여 자료분석에 유용한 효과를 보이는 신경망을 이용한 학업 성취도 시스템 모델을 제안하였다.