• 제목/요약/키워드: Item difficulty

검색결과 285건 처리시간 0.039초

초등정보과학영재 선발을 위한 평가문항의 개발에 관한 연구 (A Study on the Development of the Selective Test Item for the Gifted of Elementary Information Science)

  • 이재호;이재수
    • 영재교육연구
    • /
    • 제16권1호
    • /
    • pp.81-100
    • /
    • 2006
  • 본 논문에서는 초등정보과학영재의 선발을 위한 평가문항을 개발하고 학교 현장에 적용한 결과를 분석하여 개발 문항의 타당도를 검증하였다. 이를 위하여 다음과 같은 단계를 통하여 연구를 진행하였다. 첫째, 다양한 측면에서 정보과학영재에 대한 특성을 분석한 후 정보과학영재를 정의하였다. 둘째, 제7차 초등수학교육과정 속의 이산수학적 요소를 분석하여 초등정보과학영재의 선발을 위한 평가문항을 개발하였다. 셋째, 개발한 평가문항을 학교현장에 투입하여 다양한 관점의 결과를 분석하였다.

한국판 사회적 외모불안 척도(Korean Version of the Social Appearance Anxiety Scale, K-SAAS) 타당화 (Validation of Korean Version of the Social Appearance Anxiety Scale)

  • 이민지;김미리혜;김정호
    • 대한불안의학회지
    • /
    • 제19권1호
    • /
    • pp.1-9
    • /
    • 2023
  • Objective : To translate and adapt the Social Appearance Anxiety Scale into Korean and validate the Korean version of the social appearance anxiety scale, which measures the fear and anxiety about being negatively evaluated by others based on one's overall appearance, including body shape. Methods : For item translation and adaptation, six bilingual translators participated in the process of forward-adaptation and back-adaptation. Data were collected from undergraduate students. The sample size is 105 for Study 1 and 212 for Study 2. Classical item discrimination and difficulty analyses, exploratory factor analysis (EFA), confirmatory factor analysis (CFA), and reliability analysis were performed. Results : A unidimensional structure was found with a high internal consistency (Cronbach's α=0.95) and a high test-retest reliability (r=0.918). In addition, the concurrent validity was examined by correlations of the scale and several other scales measuring constructs related to social appearance anxiety. Conclusion : K-SAAS appears to be a reliable and valid scale for screening and assessing social appearance anxiety.

수준별 평가를 위한 문제은행 시스템 (An Item Pool System for Leveled Assessment)

  • 홍종기;전우천
    • 정보교육학회논문지
    • /
    • 제6권3호
    • /
    • pp.298-307
    • /
    • 2002
  • 최근 정보화 시대에 들어서면서 교육은 그 방법이나 내용 면에서 변화를 강력히 요구받고 있다. 이러한 시대적 요구에 따라 교육에 정보${\bullet}$통신${\bullet}$기술을 적극 수용하려는 다양한 시도가 이루어지고 있다. 그 중에서도 특히, WBI (Web-based Instruction) 교수모형은 웹의 특성상 학생들에게 도움이 될 수 있는 다양한 형태의 교육자료를 제공해 줄 수 있으며, 교육시간 및 공간 등의 범위를 확대해 줄 수 있다는 점에서 더욱 관심이 집중되고 있다. 하지만, 현재 웹 기반 교수-학습 활동에 있어서 학습자가 학습 목표에 도달되었는지를 온라인 상에서 직접 평가할 수 있는 실시간 평가 시스템에 대한 연구가 미미한 상황이다. 따라서, 본 연구는 웹을 이용한 교수-학습의 결과를 학습 과정 중에 실시간으로 평가할 수 있도록 하고, 공들여 만든 좋은 문제들을 문제은행에 저장하고 이를 모든 교사가 검색하여 적절하게 이용할 수 있도록 문제은행을 공유하도록 설계하였다. 또한, 교과-학기-단원의 카테고리를 이용해 문제와 평가지를 쉽게 검색할 수 있도록 하였고, 전통적 문항 분석방법인 문항 난이도를 적용하여 문제은행에 저장된 문항의 양호도를 확보함으로써 학생들의 수준에 맞는 적절한 평가 문항을 제공할 수 있도록 하였다. 무엇보다도 본 시스템을 진단 평가나 형성평가에 활동한다면, 7차 교육과정에서 강조되고 있는 수준별 교육과정을 진행하기 위해 필요한 학습자의 출발점 행동 파악이나, 수준별 학습을 위한 학습자 수준 진단이 보다 효과적으로 이루어 질 수 있다.

  • PDF

다변량일반화가능도 이론을 적용한 자동문항생성 기반 평가에서의 신뢰도 탐색 (Exploring the Reliability of an Assessment based on Automatic Item Generation Using the Multivariate Generalizability Theory)

  • 정진민;김성연
    • 과학교육연구지
    • /
    • 제47권2호
    • /
    • pp.211-224
    • /
    • 2023
  • 본 연구의 목적은 예시 자료를 활용하여 자동문항생성을 기반으로 생성된 평가도구의 신뢰도를 산출하는 방안을 제시하는 데 있다. 이를 위해 학생들마다 다른 문항에 응답하는 설계와 평가 점수에 다중 오차요인을 반영할 수 있는 다변량일반화가능도이론을 예시 자료에 적용하여 분석하였다. G-연구분석 결과, 대부분의 설계에서 잔차 효과 다음으로 고전검사이론의 진점수에 해당하는 학생 효과가 크게 나타났다. 또한 문항 내용 영역을 고정한 설계에서 학생들의 상대적 순위는 문항 유형이나 문항에 따라 변하지 않았으며, 문항 유형을 고정한 설계에서 내용 영역에 따라 난이도는 거의 변화가 없는 것으로 나타났다. D-연구 분석 결과, 원자료는 적정수준 이상의 신뢰도를 확보하였으며, 수와 연산, 기하, 확률 및 통계 영역의 문항 수를 줄이거나 문자와 식과 함수 영역의 가중치를 높게 반영함으로써 원자료보다 높은 신뢰도를 산출할 수 있는 것으로 나타났다. 본 연구에서 제시한 효율적인 측정 조건은 예시 평가 자료에 제한되지만 본 연구에서 활용한 방법은 자동문항생성 기반의 다양한 평가 상황에서 측정학적 특성을 바탕으로 신뢰도를 산출하고, 효율적인 측정 조건을 탐색하는 데 적용 가능하다.

코퍼스 지표를 활용한 모의 토익시험의 유용성 검증 : 난이도와 변별도 분석을 중심으로 (Verification of the Usefulness of the Mock TOEIC Test using Corpus Indices : Focusing on the Analysis of Difficulty and Discrimination)

  • 이예나
    • 한국콘텐츠학회논문지
    • /
    • 제21권10호
    • /
    • pp.576-593
    • /
    • 2021
  • 본 연구에서는 토익 시험의 정답률과 변별도에 영향을 미치는 구조적인 요인이 무엇인지 분석하기 위하여 문항 분석에서 도출된 각 파트별 코퍼스 지표들을 분석하였다. 이를 위하여 모의 토익 시험의 정답률과 변별도에 대한 코퍼스 요인들의 회귀 분석을 실시하였고, 분석 결과는 다음과 같다. 정답률에 대해서는 기초산출치중에서 word_length, no_word_sentence1, sentence_length, 정합성 지표들 중에서는 LSA_overlap_adjacent_sentences, 어휘 다양성 지표들 중에서는 MTLD_VOCD, 접속사 지표들 중에서는 All_logical_causal_connectives_incidence, 상황모형 지표들 중에서는 casual_particles_causal_verbs_Ratio, 통사적복잡성 지표들 중에서는 Minimal_Edit_Distance1, Left_embeddedness, 통사적 패턴밀도 지표들 중에서는 Infinitive_density, Preposition_phrase_density 등이 음의 영향을 미치는 것으로 나타났다. 이러한 코퍼스 요인들은 토익의 정답률을 낮추는 효과가 있기 때문에 하위 레벨의 학습자들이 단기적인 학습효과를 향상시킬 수 있는 중요한 정보들을 제공해 줄 수 있을 것이다. 변별도에 대해서는 어휘 다양성 지표들 중에서 MTLD_VOCD, 접속사 지표들 중에서는 All_logical_causal_connectives_incidence, Additive_connectives_incidence, 통사적 패턴밀도 지표들 중에서는 Infinitive_density, 어휘정보 지표들 중에서는 person1_2_pronoun_incidence 등이 정의 영향을 미치는 것으로 나타났다. 이러한 코퍼스 요인들은 변별도 증가에 영향을 주기 때문에 영어 능력 하위 그룹에 필요한 학습 프로그램을 개발하는 데 있어서 활용될 수 있을 것이다.

임상적 비판적 사고능력 검사도구 개발 및 평가 (Development and Validation of a Clinical Critical Thinking Skills Scale)

  • 신수진;양은배;공병혜;정덕유
    • 의학교육논단
    • /
    • 제14권2호
    • /
    • pp.102-108
    • /
    • 2012
  • This study developed a test entitled Clinical Critical Thinking Skills (CCTS) by using item response theory (IRT) and examined its validity. In the development stage, data obtained from a convenience sample of 627 undergraduate nursing students were analyzed using a discrimination and difficulty index with the TestAn 1.0 program. In the evaluation stage, data from a convenience sample of 284 nursing and non-nursing students were analyzed using a discrimination and difficulty index with the BILOG-MG program. Criterion validity was verified by the group comparison method. Five items received low discrimination index scores according to the IRT results. In terms of the criterion validity, CCTS scores differed according to major (t=2.21, p=0.028), location of high school (F=4.35, p=0.014), clinical experience (t=5.66, p=0.004), and grade point average (F=7.17, p< 0.001). The CCTS can be used to measure critical thinking skills in the clinical setting.

메타데이터를 이용한 음악 추천 기법 (Music Recommendation Technique Using Metadata)

  • 이혜인;윤성대
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2018년도 춘계학술대회
    • /
    • pp.75-78
    • /
    • 2018
  • 최근 디지털 음반시장의 성장으로, 들을 수 있는 음악의 양이 기하급수적으로 늘어나고 있다. 이로 인해 온라인 음원 서비스 이용자들은 마음에 드는 음악을 선택하는데 어려움을 겪고, 많은 시간을 낭비하게 되었다. 본 논문에서는 온라인 음원 서비스 이용자들이 겪는 선택의 어려움을 최소화하고, 낭비되는 시간을 줄이기 위한 추천 기법을 제안하고자 한다. 제안하는 기법은 개인정보의 이용 없이 아이템을 추천할 수 있는 아이템 기반 협업필터링 알고리즘을 사용한다. 더 정확한 추천을 위해 음원의 메타데이터를 이용하여 사용자의 선호도를 예측하고 선호도가 높은 Top-N개의 음악을 최종적으로 추천한다. 실험을 통해 제안하는 기법이 메타데이터를 이용하지 않을 때보다 추천 성능이 향상되는 것을 확인하였다.

  • PDF

적응형 군집화 기반 확장 용이한 협업 필터링 기법 (Scalable Collaborative Filtering Technique based on Adaptive Clustering)

  • 이오준;홍민성;이원진;이재동
    • 지능정보연구
    • /
    • 제20권2호
    • /
    • pp.73-92
    • /
    • 2014
  • 기존 협업 필터링 기법은 사용자들의 아이템에 대한 선호도를 기반으로 유사 아이템 집합 또는 유사 사용자 집합을 구성하고, 이를 이용해 예측된 사용자의 특정 아이템에 대한 선호도를 기반으로 추천을 수행한다. 이로 인해, 사용자 선호도 정보가 부족하게 되면, 유사 아이템 사용자 집합의 신뢰도가 낮아지고, 추천 서비스의 신뢰도 또한 따라서 낮아진다. 또한, 서비스의 규모가 커질수록, 유사 아이템, 사용자 집합의 생성에 걸리는 시간은 기하급수적으로 증가하고 추천서비스의 응답시간 또한 그에 따라 증가하게 된다. 위와 같은 문제점을 해결하기 위해 본 논문에서는 적응형 군집화 기법을 제안하고 이를 적용한 협업 필터링 기법을 제안하고 있다. 이 기법은 크게 네 가지 방법으로 이루어진다. 첫째, 사용자와 아이템의 특성 벡터를 기반으로 사용자와 아이템 각각을 군집화 하여, 기존 협업 필터링 기법에서 유사 아이템, 사용자 집합을 생성하는데 소요되는 시간을 절약하며, 사용자 선호도 정보만을 이용한 부분 집합 생성보다 추천의 신뢰도를 높이고, 초기 평가 문제와 초기 이용자 문제를 일부 해소한다. 둘째, 미리 구성된 사용자와 아이템의 군집을 기반으로 군집간의 선호도를 이용해 추천을 수행한다. 사용자가 속한 군집의 선호도가 높은 순서대로 아이템 군집을 조회하여 사용자에게 제공할 아이템 목록을 구성하여, 추천 시스템의 부하 대부분을 모델 생성 단계에서 부담하고 실제 수행 시 부하를 최소화한다. 셋째, 누락된 사용자 선호도 정보를 사용자와 아이템 군집을 이용하여 예측함으로써 협업 필터링 추천 기법의 사용자 선호도 정보 희박성으로 인한 문제를 해소한다. 넷째, 사용자와 아이템의 특성 벡터를 사용자의 피드백에 따라 학습시켜 아이템과 사용자의 정성적 특성 정량화의 어려움을 해결한다. 본 연구의 검증은 기존에 제안되었던 하이브리드 필터링 기법들과의 성능 비교를 통해 이루어졌으며, 평가 방법으로는 평균 절대 오차와 응답 시간을 이용하였다.

초등학생용 공간 시각화 검사지 개발 및 표준화 (Development and Validation of Spatial Visualization Tests for Elementary School Children)

  • 박성선
    • 한국수학교육학회지시리즈C:초등수학교육
    • /
    • 제17권2호
    • /
    • pp.159-171
    • /
    • 2014
  • 본 연구는 초등학생용 공간시각화 검사지를 개발하고 표준화하는데 목적이 있다. 이를 위하여 총 24문항으로 구성된 초등학생용 공간시각화 검사지를 개발하였으며, 초등학생 1482명을 대상으로 검사를 실시하여 신뢰도와 타당도를 분석하였다. 분석결과는 다음과 같다. 첫째, 초등학생용 공간시각화 검사지의 문항내적일관성 신뢰도는 Cronbach's ${\alpha}$=.794로 양호한 것으로 나타났다. 둘째, 검사지의 24문항에 대한 타당도를 검증하기 위하여 확인적 요인분석을 한 결과, 검사지의 타당도가 양호한 것으로 판단되었다. 셋째, 검사지 24문항에 대한 문항난이도는 .200에서부터 .886으로 나타났으며, 평균 문항난이도는 .544인 것으로 나타났다. 이상의 연구 결과로 볼 때, 본 연구에서 개발한 초등학생용 공간시각화 검사지는 신뢰도와 타당도를 확보한 것으로 보이므로, 초등학생들의 공간시각화 능력을 측정하는데 활용할 수 있을 것이다.

Comparative Analysis of the Perception of Family Functioning by Heads of Families with and without Cancer Members During Illness

  • Sahebihagh, Mohamad Hasan;Amani, Leila;Salimi, Saleh;Feizi, Aram;Khalkhali, Hamid Reza;Atri, Shirin Barzanjeh
    • Asian Pacific Journal of Cancer Prevention
    • /
    • 제17권9호
    • /
    • pp.4275-4279
    • /
    • 2016
  • Background: Cancer is a major health problem due to the aging population with increasing deaths. Family functioning is affected by cancer diagnosis and treatment. The aim of this study was to comparative analysis of the perception of family functioning by heads of families with and without cancer members during illness, focusing on changes or probable changes. Materials and Methods: This comparative study was conducted on two groups (families with a member of the cancer and controls without a family member with cancer). The families were of patients referred to the clinics and hospitals of Imam Khomeini, Taleghani and Omid of Urmia city, the number of samples being 148 for cases and 176for the control group. To collect the data, valid and reliable family functioning (FAD) was applied, a 60-item questionnaire with seven dimensions, with heads of families. To analyze the data SPSS- 23 Software was used for descriptive and analytical statistics. Significance level was defined p <0.05. Results: Among the seven items : problem solving, communication, roles, emotional response, emotional involvement, behavior control and overall functioning, only differences for average scores of problem-solving were statistically significant. Discussion: Contrary to common perception of severe damage for family functioning in families with cancer members, results of this study indicate that functioning in terms of family caregivers is more or less similar to that of the families with other diseases. Only in problem-solving item do these families experience more difficulty. Conclusion: According to the research findings, in nursing from families with cancer patient, it is recommended to focus more on the problem-solving item of the families.