• 한국수학교육학회지시리즈A:수학교육
• /
• 제43권2호
• /
• pp.151-162
• /
• 2004

For the past several years, performance assessment has been widely used by mathematics teachers. The superiority of performance assessment items compare to multiple choice items has been discussed by many researchers, however these discussions tend to be lack of empirical data. Thus, this study aims to examine the effectiveness of tree response items in comparison with multiple choice items. Using the information function in Item Response Theory(IRT), item information of free response items and multiple choice items from the Third International Mathematics and Science Study-Repeat(TIMSS-R) were obtained and compared. Test informations of the whole mathematics area as well as each content area of mathematics were computed. On average, tree response items yielded more information than multiple choice items, especially in measurement and data interpretation. This study also revealed that free response items estimated students' mathematics ability more accurately than multiple choice items with smaller number of items.

• 한국과학교육학회지
• /
• 제22권1호
• /
• pp.122-131
• /
• 2002

본 연구는 수행 평가 방식의 중요성이 대두됨에 따라 실지로 수행형 평가 문항이 전통적인 선다형 평가문항에 비해 어떤 학생들에게 어떻게 유용한지를 분석한 연구이다. 이를 위하여 제 3차 수학 과학 성취도 국제비교 반복 연구에 사용된 선다형과 수행형 평가문항들을 내용영역별로 분석하여, 수행형의 평가문항과 선다형의 평가문항의 효율성을 비교 분석하였다. 자료분석 결과 수행형의 문항이 선다형의 문항에 비하여 학생들의 능력을 더 정확하게 추정함으로써 효율성이 높은 것으로 나타났다. 특히 환경이나 과학의 본성 영역에 비하여 지구과학, 생물, 물리와 화학 영역에서 수행형의 문항이 선다형의 문항에 비하여 학생들의 능력을 더 정확하게 추정하고 있음을 보여주었다. 또한 선다형의 문항에 비하여 적은 수의 문항으로 학생들의 능력을 추정함에도 불구하고 추정오차가 적어, 적은 수의 수행형 문항으로도 학생들의 능력을 정확하게 추정할 수 있음을 시사하고 있다.

• International Journal of Contents
• /
• 제4권2호
• /
• pp.19-23
• /
• 2008

This paper presents a novel method to construct a personalized e-Learning system based on dynamic estimations of item parameters and learners' abilities, where the learning content objects are of the same intrinsic quality or homogeneously distributed and the estimations are carried out using IRT(Item Response Theory). The system dynamically connects the test and the corresponding learning procedures. Test results are directly applied to estimate examinee's ability and are used to modify the item parameters and the difficulties of learning content objects during the learning procedure is being operated. We define the learning unit 'Node' as an amount of learning objects operated so that new parameters can be re-estimated. There are various content objects in a Node and the parameters estimated at the end of current Node are directly applied to the next Node. We offer the most appropriate learning Node for a person's ability throughout the estimation processes of IRT. As a result, this scheme improves learning efficiency in web-base e-Learning environments offering the most appropriate learning objects and items to the individual students according to their estimated abilities. This scheme can be applied to any e-Learning subject having homogeneous learning objects and unidimensional test items. In order to construct the system, we present an operation scenario using the proposed system architecture with the essential databases and agents.

• 비교교육연구
• /
• 제28권5호
• /
• pp.1-19
• /
• 2018

국제 수학 과학 성취도 추이 연구와 같은 교육평가의 목적은 국가와 같은 집단을 비교하는 것이다. 이와 같이 평가의 단위가 학생보다 상위 수준일 때 집단을 비교하기 위해서는 다층 문항반응이론 기반의 집단 수준 진단평가 모형을 고려할 수 있다. 이 연구에서는 Park과 Bolt(2008)가 제안한 문항특성모형을 수정하여 새로운 다층 문항반응이론 기반의 집단 수준 진단평가 모형을 제안하였다. 이 수정된 모형은 2015년에 실시된 국제 수학 과학 성취도 추이 연구의 8학년 수학 평가 자료에 적용되었다. 그 결과 9개의 인지적 요소에 대한 국가들의 프로파일을 구할 수 있었다. 이 연구 결과는 국가 간 비교 또는 요소 간 상호 비교에 이용될 수 있다. 이와 같이 잔차항을 설명할 수 있도록 수정된 모형은 보다 높은 신뢰도를 지니며 국가 간 비교에 보다 정확한 정보를 제공할 수 있을 것으로 기대된다. 예를 이용하여 연구 결과를 어떻게 해석할 수 있는지 제시하였으며, 연구의 제한점과 후속 연구에 대해서도 논의하였다.

• 한국전문물리치료학회지
• /
• 제20권3호
• /
• pp.89-99
• /
• 2013

The purposes of this study were: 1) to show the item difficulty hierarchy of walking/moving construct of the International Classification of Functioning, Disability and Health-Activity Measure (ICF-AM), 2) to evaluate the item-level psychometrics for model fit, 3) to describe the relevant physical activity defined by level of activity intensity expressed as Metabolic Equivalent of Tasks (MET), and 4) to explore what extent the empirical activity hierarchy of the ICF-AM is linked to the conceptual model based on the level of energy expenditure described as MET. One hundred and eight participants with lower extremity impairments were examined for the present study. A newly created activity measure, the ICF-AM using an item response theory (IRT) model and computer adaptive testing (CAT) method, has a construct on walking/moving construct. Based on the ICF category of walking and moving, the instrument comprised items corresponding to: walking short distances, walking long distances, walking on different surfaces, walking around objects, climbing, and running. The item difficulty hierarchy was created using Winstep software for 20 items. The Rasch analyses (1-parameter IRT model) were performed on participants with lower extremity injuries who completed the paper and pencil version of walking/moving construct of the ICF-AM. The classification of physical activity can also be performed by the use of METs that is often preferred to determine the level of physical activity. The empirical item hierarchy of walking, climbing, running activities of the ICF-AM instrument was similar to the conceptual activity hierarchy based on the METs. The empirically derived item difficulty hierarchy of the ICF-AM may be useful in developing MET-based activity measure questionnaires. In addition to convenience of applying items to questionnaires, implications of the finding could lead to the use of CAT method without sacrificing the objectivity of physiologic measures.

• 한국콘텐츠학회논문지
• /
• 제13권12호
• /
• pp.321-327
• /
• 2013

이름대기 능력의 손상은 신경학적 질환을 지닌 환자뿐만 아니라, 정상적인 노화과정에 있는 노인에게서도 빈번하게 관찰된다. 이름대기 능력을 평가하기 위해 가장 널리 사용되고 있는 한국판 보스톤 이름대기 검사(Korean version-the Boston Naming Test, K-BNT)는 60문항으로 구성되어 있다. 일반노인들은 노화에 따른 주의력 감소로 인하여 검사 소요시간이 길면 검사에 대한 집중이 어려워지므로, 검사 결과에 대한 타당도 및 신뢰도를 확보하기 위해서는 문항축소가 바람직하다. 본 연구의 목적은 '문항반응이론(Item Response Theory)'을 적용하여, 60개 문항의 K-BNT를 일반노년층의 이름대기 능력을 가장 잘 평가할 수 있는 15개 문항의 검사(즉, K-BNT-15)를 개발하는 것이었다. 이를 위하여, 일반노인 175명을 대상으로 라쉬분석을 실시하여, 문항적합도, 성별 차이, 문항난이도 등을 평가하였다. K-BNT-15의 실시 결과, 일반 노년층은 10년 단위로 수행력이 감소하였고, 경도인지장애(mild cognitive impairment, MCI) 환자는 일반 노년층에 비해 유의하게 낮은 수행력을 보였다. 본 연구에서는 언어 평가도구의 단축형 개발 시, 특정 집단의 언어적 능력과 문항의 응답 결과의 관계를 규명하여 그 집단에게 적합한 문항을 선별할 수 있다는 점에서 문항반응이론이 유용함을 보여주었다. 또한, K-BNT-15가 노화에 따른 대면이름대기 감소 및 환자군과의 차이를 잘 보여주는 검사임을 검증하였다.

• Psychiatry investigation
• /
• 제15권11호
• /
• pp.1053-1063
• /
• 2018

Objective This study evaluated the psychometric properties of the Korean Anxiety Screening Assessment (K-ANX) developed for screening anxiety disorders. Methods Data from 613 participants were analyzed. The K-ANX was evaluated for reliability using Cronbach's alpha, item-total correlation, and test information curve, and for validity using focus group interviews, factor analysis, correlational analysis, and item characteristics based on item response theory (IRT). The diagnostic sensitivity and specificity of the K-ANX were compared with those of the Beck Anxiety Inventory (BAI) and Generalized Anxiety Disorder 7-item scale (GAD-7). Results The K-ANX showed excellent internal consistency (${\alpha}=0.97$) and item-total coefficients (0.92-0.97), and a one-factor structure was suggested. All items were highly correlated with the total scores of the BAI, GAD-7, and Penn State Worry Questionnaire. IRT analysis indicated the K-ANX was most informative as a screening tool for anxiety disorders at the range between 0.8 and 1.6 (i.e., top 21.2 to 5.5 percentiles). Higher sensitivity (0.795) and specificity (0.937) for identifying anxiety disorders were observed in the K-ANX compared to the BAI and GAD-7. Conclusion The K-ANX is a reliable and valid measure to screen anxiety disorders in a Korean sample, with greater sensitivity and specificity than current measures of anxiety symptoms.

• 한국통계학회:학술대회논문집
• /
• 한국통계학회 2003년도 추계 학술발표회 논문집
• /
• pp.149-154
• /
• 2003

문항반응이론(item response theory, IRT)에서는 문항이 가지고 있는 특성을 기초로 피험 자의 능력을 추정 하고 동시 에 각 문항별 문항특성곡선(item characteristics curve; ICC)을 이용하여 문항모수를 추정하게 된다. 이러한 추정알고리즘은 이미 외국에서는 상용화되 어 활용되고 있는바, 국내 에서 개 발한 Any Assess의 활용 가능성을 모의 실험을 통하여 그 결과의 신뢰성을 검증해 보았다.

• 인터넷정보학회논문지
• /
• 제11권2호
• /
• pp.165-172
• /
• 2010

웹 기반 학습시스템에서 학습자의 학습효율을 높이기 위하여 자기조절학습, 자기주도학습 등의 방법이 사용되고 있다. 이러한 방법들은 학습자의 학습수준을 고려한 방법이지만 학습자의 정확한 학습능력을 고려하기 위해서는 수준별 학습의 적용이 필요하다. 본 연구에서는 학습자의 학습능력을 고려한 학습 시스템을 제시하였다. 학습자의 학습능력을 설정하기 위하여 문항반응이론을 사용하였으며, 학습 콘텐츠와 학습문항은 각 난이도에 따라 개발 및 적용되었다.

• 한국문헌정보학회지
• /
• 제47권3호
• /
• pp.296-320
• /
• 2013

이 연구의 목적은 대학 도서관의 브랜드 이미지 측정을 위한 연구모형을 제시하는 것이다. 도서관 브랜드 이미지의 구성요소를 추출하기 위하여 선행연구를 조사하여 도서관 브랜드 이미지의 구성차원을 기능적 이미지, 경험적 이미지, 상징적 이미지의 3개의 차원으로 나누고, 이를 다시 총 11개의 하부차원과 45개의 항목으로 구분하였다. 구분된 항목을 대상으로 IRT(item response test)와 군집분석을 실시하였으며, 그 결과 총 3개의 차원과 9개의 하부차원 그리고 27개의 항목이 도서관의 브랜드 이미지 영향요소로서 유효한 것으로 나타났다.