• 인지과학
• /
• 제21권2호
• /
• pp.283-307
• /
• 2010

본 연구에서는 초등학생을 위한 새로운 수학평가 시스템을 만들고 그 사용가능성을 알아보았다. 이 시스템은 최근 제안된 구성적 선다형 방식(constructive multiple-choice testing system)을 수학에 확장한 것이다. 구성적 선다형은, 동일한 문제에 대해 먼저 개방형으로 반응한다음 다시 같은 문제를 선다형으로 반응하게 하는 방식이다. 그 장점은 과정 정보를 나중에 확인할 수 있고, 수험자는 시험 종료 직후 선다형에 근거하여 피드백을 받을 수 있다는 것이다. 본 연구에서 제안된 시스템은, 수학 문제의 출제, 계정 관리를 위한 관리자 모드와 학생들이 실제 풀이 과정을 메뉴바와 키보드로 입력할 수 있도록 하는 시험 모드로 구성되어 있다. 이 방식으로 시험을 보게 한 집단과 중간 과정을 지필식으로 보게 한 집단을 비교했을 때, 시험 시간은 길어졌지만, 선다형의 집단 간 평균 점수 상에서는 차이가 없음이 관찰되었다. 이 결과는 본 연구에서 구현된 개방형 수학 시험 시스템이 실제 교실 평가에서 효과적으로 사용될 수 있음을 보여준다.

• 한국가정과교육학회지
• /
• 제32권2호
• /
• pp.19-42
• /
• 2020

본 연구의 목적은 호주 빅토리아주 가정과교육과정을 분석하고 우리나라 가정과교육과정에 주는 시사점을 도출하는 데 있다. 이를 위해 관련 웹페이지를 통해 교육과정 내용을 분석하였고, 가정과교육과정 담당자, 가정과교사들과 이메일과 면담을 통하여 가정과교육과정 편성과 운영 실제를 파악하였으며 그 연구결과는 다음과 같다. 첫째, 공통필수 교육과정(F-10)에서는 '디자인과 기술', '건강과 체육' 교육과정의 내용 진술과 성취기준을 바탕으로 하는 통합교육과정으로 운영되고 있다. 이에 따라 교육과정에 가르쳐야 할 내용이 규정되어 있지 않고 역량 중심으로 교육과정이 편성되었기 때문에 교사의 교육과정 편성 및 운영에 재량권 및 자율권이 크다 보니 전문성이 담보되어야 한다는 점을 도출하였다. 둘째, 선택중심 가정과교육과정(11-12)에 속한 VCE 과목은 '식생활'과 '건강과 인간발달'이며, 학생들이 이 과목을 선택하게 되면 대학진학을 위해 지필평가를 치러야 한다. 지필평가 문항은 교육과정에 있는 역량중심 '산출평가'에 근거하여 출제되고, 구체적인 내용이 규정되지 않기 때문에 학교 교사는 학생들에게 문제해결능력, 비판적 사고능력 등을 함양하기 위한 다양한 수업을 고안하여 운영해야 한다는 점을 도출하였다. 셋째, 가정과교사는 학교교육과정 편성을 위해 과목명, 다룰 내용, 평가 내용을 모두 창조할 있는 재량권이 있으며 이에 따른 전문성을 발휘하고 있었다. 이는 교사 개인의 능력도 관련되지만 무엇보다 주 교육과정평가원 웹페이지의 상세한 예시 탑재, VCE 과목의 검증과정 등 시스템이 잘 갖추어져 있다는 점에 기인한다고 생각된다.

• 정보처리학회논문지A
• /
• 제12A권6호
• /
• pp.539-546
• /
• 2005

최근 인터넷 사용자가 급증하면서 원격교육의 발전과 함께 평가에서도 원격을 이용한 방법이 많이 사용되고 있다. 하지만 현재까지는 자연언어처리의 어려움으로 객관식이나 단답식 평가가 주류를 이루고 있다. 본 논문에서는 서술형 주관식 문제의 빠르고 공정한 지능형 채점을 위하여, 다양한 언어 지식을 활용하였다. 이를 위하여, 가공되지 않은 말뭉치에서 의미커널을 구축하고, 수험자가 작성한 답안과 이미 구축된 정답을 벡터로 구성하여 이 답안간의 유사도를 의미커널을 통해 계산하여 정답여부를 자동으로 판단하도록 하였다. 의미커널을 구축하기 위하여 벡터 공간 모델에 기반한 은닉 의미 분석을 이용하였으며, 또한 한글 워드넷을 이용하여 답안의 정보부족 문제를 줄여보고자 하였다. 실험을 위하여 3000 문항의 주관식 문제를 구축하였으며, 의미커널의 구축을 위하여 38,727개의 신문기사를 모아 말뭉치로 구성하고 75,175개의 색인어를 추출하였다. 의미커널에 기반한 자동 채점 시스템으로 실제 수험자에 의하여 작성된 답안을 채점한 결과, 출제자가 실제로 채점한 결과를 기준으로 하여 최고 0.894의 상관관계를 얻을 수 있었다

• 정보처리학회논문지:소프트웨어 및 데이터공학
• /
• 제4권11호
• /
• pp.509-520
• /
• 2015

대학수학능력시험(수능)은 고등학교 3년간의 학업 성취도를 측정하는 대표적인 평가 도구로서 대한민국 대학 입시에 있어 매우 중요한 역할을 하는 시험이다. 응시생들의 학업 성취도를 효과적으로 평가하기 위해서는 수능의 난이도가 적절하게 조절되어야 하나 지금까지는 수능 난이도의 편차가 매우 크게 나타나 매 입시연도마다 여러 가지 문제점을 야기해왔다. 본 연구에서는 전문가의 판단에 의존한 기존 방식에서 벗어나 지금까지 시행된 모의고사 및 실제 시험을 통해 축적된 자료를 바탕으로 데이터마이닝 기법을 적용하여 영어영역 문제의 난이도를 예측하는 모델을 구축하고 난이도 예측에 영향을 미치는 요소를 판별하고자 한다. 이를 위해 각 문항의 특성을 판별할 수 있는 여러 지표와 함께 지문, 문제, 답안 등에 나타난 단어들의 특징을 토픽 모델링(topic modeling) 기법을 이용하여 정량화하고 이를 바탕으로 선형회귀분석 및 의사결정나무 기법을 이용하여 각 문항의 난이도를 예측하는 모델을 구축하였다. 구축된 예측 모델을 실제 문제에 적용한 결과 난이도의 상/하 구분에 대한 예측 정확도는 90% 수준으로 나타났으며, 실제 정답률 대비 오차 비율은 약 16% 이내인 것으로 나타났다. 또한 배점 및 문제 유형이 문제의 난이도에 큰 영향을 미치며 지문이 특정 주제에 관련된 경우에도 난이도에 영향을 미치는 것을 확인하였다. 본 연구에서 제시된 방법론을 이용하여 영어영역 각 문제들에 대한 기대 정답률의 범위를 추정할 수 있으며 이를 종합하여 영어영역 전체 문제에 대한 정답률 예측을 통해 적절한 난이도의 문제를 출제하는 데 기여할 수 있을 것으로 기대한다.