• 제목/요약/키워드: Rasch Analysis

검색결과 91건 처리시간 0.021초

생태계에 대한 학습발달과정의 개발과 평가 (Developing and Assessing a Learning Progression for the Ecosystem)

  • 여채영;이효녕
    • 한국과학교육학회지
    • /
    • 제36권1호
    • /
    • pp.29-43
    • /
    • 2016
  • 미국과 유럽의 여러 국가에서 과학의 학문 내 핵심 개념을 중심으로 과학 교육과정을 재구성하려는 노력이 시도되고 있으며 그 중 대표적인 변화가 학습발달과정을 이용한 교육과정을 설계하는 것이다. 학습발달과정은 과학의 핵심 개념과 과학적 활동과정을 논리적이며 단계적으로 정교하게 기술한 틀로서 학생이 학습하는 동안 연속적이며 체계적으로 확립되어 가는 이해의 과정을 설명한다. 미국의 차세대과학기준(NGSS)에서 제시한 생명과학 핵심 개념 중 하나인 생태계에 관하여 학습발달과정을 개발하고 개발된 학습발달과정을 평가하고자 하였다. 이를 위해 학습발달과정에 대한 문헌 연구를 통해 개발 절차를 Development, Assessment, Analysis, Amendment의 네 단계로 설정하고 순차적이며 반복적인 과정을 통해 생태계에 관한 학습발달과정을 개발하였다. 그리고 개발된 학습발달과정의 분석 결과 학습 발달과정에 기반을 둔 평가는 학생의 능력을 파악하는데 신뢰할 수 있는 정보를 제공한다는 결론을 도출하였다. 이를 통해 학습발달과정의 개발 과정에 효과적인 방법으로 핵심 성취기준을 이용한 Framework의 개발, OMC 문항 형식과 Rasch 모델을 이용한 평가와 분석 과정을 제안한다. 또한 경험적으로 검증된 학습발달과정을 이용하여 교육 내용, 교육 방법, 교육 평가가 연계된 교육과정 강화 방안을 제안한다. 국내 학습발달과정에 대한 연구가 부족한 시점에 이 연구를 통해 제안된 학습발달과정 개발 절차를 활용하여 학습발달과정의 개발에 수월성을 제공하고, 개발된 학습발달과정의 적용으로 교육과정의 표준과 방향을 제시할 수 있을 것이다.

뇌성마비 아동을 대상으로 한 감각프로파일(Sensory Profile)의 구성타당도 연구 (Construct Validation of the Sensory Profile for Children with Congenital Cerebral Palsy)

  • 유두한;홍덕기;황선정
    • 재활복지
    • /
    • 제18권4호
    • /
    • pp.315-330
    • /
    • 2014
  • 본 연구는 뇌성마비 아동을 대상으로 감각프로파일(Sensory Profile)의 구성타당도를 검증하는데 목적이 있다. 만 3~10세 뇌성마비 아동 87명의 감각처리기능을 평가하기 위해 보호자를 대상으로 동의 후에 평가용지와 평가지침서를 우편 또는 방문을 통해 작성하도록 하여 자료를 수집하였다. 수집된 자료는 타당도를 검증하기 위해 Winstep 3.81을 통해 라쉬분석을 실시하여 항목과 대상자의 적합성, 항목의 난이도, 평정척도의 적합성, 대상자와 항목의 분리신뢰도를 분석하였다. 연구결과, 87명의 뇌성마비 아동 중에 4명의 아동이 부적합 대상자로 나타났다. 부적합한 대상자를 제외한 83명의 대상자로 항목의 적합도를 분석한 결과, 15개 항목이 부적합 판정을 받았다. 항목의 난이도에 대한 분석결과에서는 뇌성마비 아동의 감각처리능력에 비해 낮은 난이도의 평가항목들로 구성되어 있어 높은 평가항목이 필요한 것으로 나타났다. 감각프로파일의 평정척도 분석결과에서는 5점 척도보다는 3점 척도가 더 적합한 것으로 나타났다. 또한 3점 척도의 항목과 대상자에 대한 분리신뢰도는 0.90 이상 값으로 우수한 수준으로 분석되었다. 본 연구 결과를 토대로 난이도가 높은 새로운 평가항목의 개발과 3점 척도의 점수체계 변환으로 타당도가 검증된 감각프로파일의 임상적 적용이 필요할 것으로 생각된다.

Psychometric Evaluation of Uterine Cervical Cancer Screening Embarrassment Questionnaire among Korean Women: Complementary Use of Rasch Model

  • Cho, Eun-Jung;Chung, Bok-Yae;Lee, Kwan;Consedine, Nathan S.;Lee, Won-Kee
    • 여성건강간호학회지
    • /
    • 제17권5호
    • /
    • pp.463-473
    • /
    • 2011
  • Purpose: Cervical cancer can be prevented by regular cervical screening. Embarrassment has been reported as one important barrier to cervical screening uptake. The absence of appropriate instrumentation, however, has limited our understanding of the links between embarrassment and health care outcomes. The purpose of this study was to evaluate psychometric attributes of the uterine cervical cancer screening embarrassment questionnaire. Methods: A convenience sample for field study was recruited from four gynecological clinics in Gyeongju, Korea. Within a cross-sectional descriptive design, 339 women who had cervical screening completed self-administered measures of embarrassment including a visual analogue, general medical embarrassment, dispositional embarrassment, and Pap smear related negative emotion. Results: Rasch analysis of items demonstrated the evidence of one-dimensional construct and good 7-point rating scales functioning. Factor analysis revealed that uterine cervical cancer screening embarrassment was comprised of two domains-bodily manifestations and perceiving an undesirable social face. Construct validity was demonstrated by a high subscale-to-subscale correlation. Convergent and discriminant validity was evidenced by significant correlations with a 100 mm VAS scale, general medical embarrassment, and Pap smear related negative emotion. Known-group validity was established by comparing women with high versus low trait embarrassment. Both two sub-scales and overall scale demonstrated good internal reliability. Conclusion: The Uterine uterine cervical cancer screening questionnaire is a reliable and valid instrument suited to assessing the manifestations of embarrassment during screening. The use of instrument can be extended to understand the client's embarrassment undergoing health examinations which require the exposure of their private parts.

A FACETS Analysis of Rater Characteristics and Rater Bias in Measuring L2 Writing Performance

  • Shin, You-Sun
    • 영어어문교육
    • /
    • 제16권1호
    • /
    • pp.123-142
    • /
    • 2009
  • The present study used multi-faceted Rasch measurement to explore the characteristics and bias patterns of non-native raters when they scored L2 writing tasks. Three raters scored 254 writing tasks written by Korean university students on two topics adapted from the TOEFL Test of Written English (TWE). The written products were assessed using a five-category rating scale (Content, Organization, Language in Use, Grammar, and Mechanics). The raters only showed a difference in severity with regard to rating categories but not in task types. Overall, the raters scored Grammar most harshly and Organization most leniently. The results also indicated several bias patterns of ratings with regard to the rating categories and task types. In rater-task bias interactions, each rater showed recurring bias patterns in their rating between two writing tasks. Analysis of rater-category bias interaction showed that the three raters revealed biased patterns across all the rating categories though they were relatively consistent in their rating. The study has implications for the importance of rater training and task selection in L2 writing assessment.

  • PDF

Psychometric Properties of the WeeFIM in Korean Children With Cerebral Palsy

  • Park, So-Yeon;Park, Eun-Young
    • 한국전문물리치료학회지
    • /
    • 제17권4호
    • /
    • pp.41-48
    • /
    • 2010
  • The WeeFIM is an outcome measure used worldwide to evaluate the functional abilities of children. The aim of this study was to evaluate the psychometric properties of WeeFIM in Korean children with cerebral palsy (CP) using the Rasch model. The mean age of the participants (92 boys and 53 girls) was 10.6 years (SD=2.3, range 5~15 years). The Winsteps software was used for analyzing the internal construct validity and reliability of WeeFIM. For analyzing the internal validity the motor and cognitive area items of the WeeFIM were analyzed both together and separately. When all 18 items were analyzed 4 were considered to be misfits; upper extremity dressing, lower extremity dressing, toileting, and comprehension. When only the 13 motor items were analyzed, toileting, bladder management, and bowel management were considered misfits. In addition, only comprehension was considered as a misfit among the 5 cognitive items. The most difficult motor items were stair climbing, and bathing. The simple ones were eating, bowel management, and bladder management. The most difficult cognitive item was problem solving, and the simplest one was comprehension. The person separation indexes and reliability for combined and divided instruments were reported as excellent. These results demonstrated the applicability of WeeFIM to Korean CP children with satisfactory reliability and validity. Further studies should include young children with CP and compare item difficulty among the different types of CP. In addition, the Korean normative data of nondisabled children should be used to compare the cultural differences between Korea and other countries.

A Comparative Study of Item Difficulty Hierarchy of Self-Reported Activity Measure Versus Metabolic Equivalent of Tasks

  • Choi, Bong-Sam
    • 한국전문물리치료학회지
    • /
    • 제20권3호
    • /
    • pp.89-99
    • /
    • 2013
  • The purposes of this study were: 1) to show the item difficulty hierarchy of walking/moving construct of the International Classification of Functioning, Disability and Health-Activity Measure (ICF-AM), 2) to evaluate the item-level psychometrics for model fit, 3) to describe the relevant physical activity defined by level of activity intensity expressed as Metabolic Equivalent of Tasks (MET), and 4) to explore what extent the empirical activity hierarchy of the ICF-AM is linked to the conceptual model based on the level of energy expenditure described as MET. One hundred and eight participants with lower extremity impairments were examined for the present study. A newly created activity measure, the ICF-AM using an item response theory (IRT) model and computer adaptive testing (CAT) method, has a construct on walking/moving construct. Based on the ICF category of walking and moving, the instrument comprised items corresponding to: walking short distances, walking long distances, walking on different surfaces, walking around objects, climbing, and running. The item difficulty hierarchy was created using Winstep software for 20 items. The Rasch analyses (1-parameter IRT model) were performed on participants with lower extremity injuries who completed the paper and pencil version of walking/moving construct of the ICF-AM. The classification of physical activity can also be performed by the use of METs that is often preferred to determine the level of physical activity. The empirical item hierarchy of walking, climbing, running activities of the ICF-AM instrument was similar to the conceptual activity hierarchy based on the METs. The empirically derived item difficulty hierarchy of the ICF-AM may be useful in developing MET-based activity measure questionnaires. In addition to convenience of applying items to questionnaires, implications of the finding could lead to the use of CAT method without sacrificing the objectivity of physiologic measures.

과학영재 학생들의 메타모델링 지식(MMK) 발달 및 MMK 발달수준과 실제 수행과의 관계 탐색 (Exploring the Progression of Meta-Modeling Knowledge (MMK) and Relationship between MMK Progression Level and Actual Practice for Science Gifted)

  • 김정은;김성기;백성혜
    • 대한화학회지
    • /
    • 제64권2호
    • /
    • pp.111-118
    • /
    • 2020
  • 이 연구는 과학영재 학생들의 MMK 발달 및 MMK 발달 수준과 실제 수행과의 관계에 대한 탐색을 목적으로 한다. 먼저, Rasch 모델을 이용하여 51명 학생의 MMK 발달 단계를 1년 간격으로 2번 측정하였다. 이후 교차검증을 통해 MMK 발달에 유의미한 변화가 있는지를 판단하였다. 교차검증 결과 영재학생들의 MMK 발달은 통계적으로 유미한 변화가 없었다(p>.05). 두번째로, 7명의 영재 학생을 대상으로 MMK 발달 단계와 수행과의 관계를 분석하였다. 분석결과 학생이 수행에서 보이는 반응은 MMK 발달 단계를 능가할 수 없음을 확인할 수 있었으며, MMK 발달 단계가 높은 학생이 실제 수행에서는 낮은 수준의 반응을 보인 경우도 있었다. 이 두 연구결과는 MMK 발달을 높일 수 있도록 현재 영재 학생들에게 제공되는 교육 프로그램에 대한 제고가 필요하며, 이와 더불어 지식과 수행을 연결할 수 있는 영재교육이 필요함을 보여준다.

Equating Two Health-related Quality of Life Instruments Applied to Cancer Survivors Who Underwent Palliative Care

  • Bongsam Choi;Heesu Kim;Sunhwi Bang;Byunggwan Kim;Jaekwang Shim
    • 한국전문물리치료학회지
    • /
    • 제30권1호
    • /
    • pp.32-40
    • /
    • 2023
  • Background: Equating is a statistical procedure used to create a common measurement scale across two instruments. Item-level information should be taken into consideration so that scores can communicate interchangeably across the instruments. Objects: To investigate a common measurement scale across two health-related quality of life questionnaires (HRQOL) applied to various cancer survivors who underwent palliative care in healthcare institutions. Methods: A total of 139 cancer survivors who underwent palliative care were recruited from two rehabilitation hospitals and an oriental medicine hospital. Participants consisted of various cancer survivors who presented to the sites for palliative care. They were asked to fill out Korean versions of the World Health Organization Quality of Life (WHOQOL-BREF) and EuroQOL-5 dimension (EQ-5D) questionnaires following the palliative care. For the item level comparison, the Rasch rating scale model was used to investigate how participants regarded individual test items of two instruments in relation to item difficulty calibrations. Results: All items except the three items fit the Rasch model. One item (anxiety/depression) of the EQ-5D and two items (dependence on medical aids and negative feelings) of the WHOQOL-BREF are misfit. The WHOQOL-BREF targets the survivors well, while the EQ-5D is able to target the survivors with lower HRQOL levels with some ceiling effects. By inspecting the item difficulty calibrations of the two instruments, five items of the WHOQOL-BREF are selected as common items in relation to the EQ-5D. These five items are considered compatible with each other. Differential item functioning (DIF) analysis reveals that the healthcare item of the WHOQOL-BREF vs the self-care item of the EQ-5D exhibits significant DIF. Conclusion: Findings suggest that one paired item should be taken into consideration when equating the WHOQOL-BREF and the EQ-5D applied to cancer survivors who underwent palliative care.

Exploring the Latent Trait and the Measurement Properties of Korean World Health Organization Quality of Life-BREF Measure Applied to Cancer Survivors

  • Bongsam Choi
    • 한국전문물리치료학회지
    • /
    • 제30권2호
    • /
    • pp.120-127
    • /
    • 2023
  • Background: In general, measurement qualities of cross-culturally adapted quality of life (QOL) measures are altered in many aspects, although versions of them are well-validated measures. The latent trait and measurement qualities of the QOL measures for cancer-related samples should be considered when developing cross-culturally adapted measures. Objects: To investigate the latent trait of the translated into Korean World Health Organization Quality of Life-BREF (WHOQOL-BREF) administered to different cancer survivors who had palliative rehabilitation care service (PRCS). Methods: A cross-sectional study with 139 cancer survivors who had an experience of cancer survivorship with PRCS were conducted with a two-step analytic procedure including exploratory factor analysis (EFA) to confirm the latent trait and Rasch rating scale modeling to investigate the measurement qualities of the cross-culturally adapted WHOQOL-BREF measure. Results: While the original WHOQOL-BREF measure constitutes a 4-latent trait, the EFA reveals that 24 items constitute six substantial factors. The item loadings are predominantly spread over factors 1 through 4 in a mixed manner of the latent traits, while the loadings of 'physical health' and 'environmental health' latent traits show similarity to what the original measure intended to assess. The latent trait of the cross-culturally adapted WHOQOL-BREF measure administered to different cancer survivors is likely to reveal more dimensions than the original WHOQOL-BREF measure. Person reliability (i.e., analogous to Cronbach's alpha) and separation are measured with 0.92 and 3.48, respectively. All items except the one item (medical treatment item) fit the Rasch rating model. Conclusion: Findings suggest that the latent trait and the measurement qualities of the cross-culturally adapted WHOQOL-BREF measure should be taken into consideration when applying versions of it to various populations.

순위 선다형 문항을 이용한 천문 시스템 학습 발달과정 개발 및 타당화 연구 (Development and Validation of a Learning Progression for Astronomical Systems Using Ordered Multiple-Choice Items)

  • 맹승호;이기영;박영신;이정아;오현석
    • 한국과학교육학회지
    • /
    • 제34권8호
    • /
    • pp.703-718
    • /
    • 2014
  • 이 연구에서는 지구, 지구 - 달 계, 태양계, 그리고 은하와 우주를 포함하는 천체의 구조와 운동을 종합한 천문 시스템(astronomical systems)의 학습 발달과정(learning progressions)을 조사하기 위하여, 순위 선다형 평가 문항을 개발하고 이를 초등/중학생들에게 적용한 검사 결과에 기반하여 학습 발달과정 해석의 타당성 검증의 근거를 제시하였다. 연구의 과정은 '구인특화, 평가문항 개발, 평가결과 기술, 측정 모델'로 이루어진 4 단계의 구인 모델링 방식(construct modeling approach)에 기반하여 진행되었다. 천문 시스템의 내용적 평가 구인으로 천체의 운동과 구조를 선정하였고, 탐구실행적 평가 구인으로 공간적 사고와 시스템 사고와 같은 천문학적 사고를 선정하였다. 이 연구에서 개발된 순위 선다형 평가 문항들은 천문 시스템에 대한 학습 발달과정을 조사하기 위한 검사 도구로서 적절하였다. 즉, item fit 분석 결과는 학생들의 문항 반응 결과가 Rasch 모델로 측정한 결과와 부합하였다. 그리고 Wright map 분석 결과는 이 연구의 평가 문항들이 천문시스템에 대한 학생들의 가설적 발달 경로를 조사하는데 매우 효과적임을 보여주었다. 학습 발달과정의 하위 정착점에서 학생들은 천체들의 위치와 운동 방향의 변화를 지구에서 보는 관점에서 2차원 평면으로 해석하는 공간적 사고 수준을 보였으며, 지구-달 계의 모델에서 천체의 위치와 변화를 부정확하게 연결하거나, 태양계 행성들과 은하수에 대한 단순한 패턴을 인식하는 시스템 사고 수준을 보였다. 학습발달과정의 중간 단계에서 학생들은 우주에서 내려다 본 지구 및 지구-달 계, 태양계의 모델을 근거로 천체의 운동을 해석하는 공간적 사고의 수준을 나타냈으며, 천체의 구조를 구성하는 요소들을 이 모델들과 연관시키는 시스템 사고를 보였다. 학습 발달과정의 상위 정착점에서 학생들은 우주에서 내려다 본 관점에서 형성된 천체의 운동 모델을 지구에서 바라 본 관점에서 얻은 자료와 서로 연관시키는 관점 전환의 공간적 사고를 지구의 운동, 지구-달 계의 운동, 태양계 행성의 운동, 은하와 우주의 운동에 적용할 수 있었다. 또한 상위 정착점에 도달한 학생들은 천문 시스템의 설명 모델을 구성하는 하위 요소들 간의 상호연관성을 파악하고 이를 설명 모델에 적용할 수 있는 시스템 사고를 나타냈다.