사이버 교육은 시간과 공간의 제약을 벗어나 각종 멀티미디어 자원을 이용함으로써 기존 교육 방식을 보조하거나 대체하게 되었다. 온라인 학습자들을 평가하고 교육과정을 개선할 수 있는 평가 시스템에 대한 연구는 다양한 교육 컨텐츠에 비하여 부족한 편이다. 본 논문에서는 JSP 와 JDBC 기술을 이용하여 문제 은행 시스템을 설계하였다. 기존의 학습 평가 시스템과는 달리, 데이터 표현을 위하여 XML 언어를 사용하였으며, 객관식 문제의 난이도 조절을 위한 피드백 및 단답형 주관식 문제에 대한 채점방식에 대한 고려를 평가 시스템 설계에 포함하였다. 문제은행은 문항의 형태, 내용, 난이도 등을 포함한 문항의 특성과 관련된 정보들을 체계적으로 저장하여, 보다 정확한 학습 평가 시스템이 되도록 설계하였다.
최근 소프트웨어 교육이 중요해짐에 따라 학교 SW 교육이 강화되고 있다. 2017년부터는 초등학교, 2020년부터는 중학교에 소프트웨어교육이 필수화 될 예정이다. 그러나 현재 부족한 정보 교사의 수와, 열악한 실습실 환경을 갖는 학교가 많다. 그에 따라 본 논문에서는 학습자에 의해 시스템이 영향을 받지 않고, 다양한 언어를 제공하며, 실습 채점을 지원하는 프로그래밍 실습 시스템을 설계하였다.
인터넷 통신의 발달 및 워드프로세서의 기능 향상으로 인해 일선 교육현장에서의 표절은 심각한 문제가 되고 있다. 본 연구에서는 C, C++, Java 등으로 작성된 프로그램 소스 코드들의 유사도를 측정하는 방법을 제시하고, 소스 코드를 계층적으로 군집화하고 표절 결과를 수형도로 시각화하는 방법을 제시한다. 채점자는 시각화된 수형도를 보고 임계값을 설정하여 표절 그룹을 분리할 수 있다. 실제 데이터에서 효과를 알아보기 위해서 학부 1학년생 컴퓨터 개론 및 실습과목 강의 중에 제출된 과제물 프로그램을 이용하여 실험해 보았으며, 유용하고 현실성 있는 방법임을 확인하였다.
최근 인터넷 사용자가 급증하면서 원격교육의 발전과 함께 평가에서도 원격을 이용한 방법이 많이 사용되고 있다. 하지만 현재까지는 자연언어처리의 어려움으로 객관식이나 단답식 평가가 주류를 이루고 있다. 본 논문에서는 서술형 주관식 문제의 빠르고 공정한 지능형 채점을 위하여, 다양한 언어 지식을 활용하였다. 이를 위하여, 가공되지 않은 말뭉치에서 의미커널을 구축하고, 수험자가 작성한 답안과 이미 구축된 정답을 벡터로 구성하여 이 답안간의 유사도를 의미커널을 통해 계산하여 정답여부를 자동으로 판단하도록 하였다. 의미커널을 구축하기 위하여 벡터 공간 모델에 기반한 은닉 의미 분석을 이용하였으며, 또한 한글 워드넷을 이용하여 답안의 정보부족 문제를 줄여보고자 하였다. 실험을 위하여 3000 문항의 주관식 문제를 구축하였으며, 의미커널의 구축을 위하여 38,727개의 신문기사를 모아 말뭉치로 구성하고 75,175개의 색인어를 추출하였다. 의미커널에 기반한 자동 채점 시스템으로 실제 수험자에 의하여 작성된 답안을 채점한 결과, 출제자가 실제로 채점한 결과를 기준으로 하여 최고 0.894의 상관관계를 얻을 수 있었다
미래교육에서는 학습자 주도의 교육방식과 평가방식의 변화로 교육의 패러다임이 바뀌고 있다. 또한 AI 기반의 학습 인프라와 소프트웨어 교육은 그 역할와 필요성이 점점 확대되고 있다. 이에 본 연구에서는 미래교육에서 추구하는 AI 기반의 평가를 학습자 주도 평가에 접목시켜 그 효과성을 고찰해 보고자 하였다. AI 교육 및 평가 관련 문헌 연구와 학습자 주도형의 소프트웨어 평가 방법 7단계를 인용하여 초등학교 수준에 맞는 평가요소를 2015 개정 초등 실과교육과정 내용 요소인 소프트웨어의 이해, 절차적 문제해결, 프로그래밍 요소와 구조 평가요소와 연계하여 추출하고자 하였다. 앞으로 관련 연구를 통해 소프트웨어 교육에서 AI 기반의 학습자 주도 평가 요소를 적용한 채점 시스템을 개발하여 그 효과성을 지속적으로 입증한 후 학교 현장이 소프트웨어 교육에서 AI 기반의 학습자 주도 평가를 통해 미래교육을 주체적으로 준비해 나가는 데 도움이 되고자 한다.
본 연구의 목적은 최근 영재 선발을 위해서 도입된 관찰 추천 선발제도에서 교사 관찰 추천서의 활용도를 높이기 위하여 현재 영재 선발전형의 일환으로 제출되는 교사 관찰 추천서를 분석하고 적절한 평가 모형을 개발하여 교사 관찰 추천서의 객관성 확보 방안을 마련하는 것이다. 연구 대상은 2012년 D광역시 소재 D대학부설 영재교육원 선발의 1차 전형에 통과한 초등수학영재 60명에 대한 교사 관찰 추천서이다. 연구 결과 교사 관찰 추천서에 나타난 수학 영재행동특성으로 구체적인 사례보다는 피상적인 진술을 하는 경향이 많았으며, 연구자가 고안한 교사 관찰 추천서의 분석 틀에 따라 빈도분석을 한 결과 특정 문항에 집중되는 경향을 보였다. 이는 관찰하고 서술하기 용이한 부분이 있는 반면 그렇지 못한 부분이 있거나 영재의 특성으로 판단하지 않았다는 것을 보여준다. 따라서 관찰 추천을 하기에 앞서 학생의 영재행동특성을 서술할 수 있는 좀 더 세분화된 교사 관찰 추천서 양식의 개발 및 영재의 관찰 추천과 관련된 교사연수가 체계적으로 이루어져야 한다는 것을 보여준다. 또한 교사 관찰 추천서에 나타난 영재행동특성에 대해서 Rubric 모형을 적용하여 점수화한 값을 기반으로 한 채점자간의 신뢰도는 1차 채점 시에는 상관계수가 .641이었고, 채점 과정에 대한 협의를 거친 후 3주 후에 실시한 2차 채점 시에는 .732로 다소 상승하였다. 이는 1차 채점 이후에 협의과정을 거치면서 채점자간의 엄격성을 조정하였으며, 서술형이기에 나타날 수 있는 다양한 상황에서의 세부적인 판단 기준을 세우고, 새롭게 나타난 상황에 대한 점수 부여의 합의점을 찾았기 때문이라고 볼 수 있다. 즉, 초등수학영재 판별을 위해서는 적절한 모형의 개발만큼이나 평가 모형에 대한 채점자들의 엄밀한 이해와 적용이 필요하다는 것을 시사한다.
This study analyzed the change in the rater reliability based on the student's practice evaluation process conducted at Yonsei University College of Dentistry. Through this, we suggest the significance of the rater calibration training in the student's practical evaluation of dental college. Nine professors from the department of Conservative Dentistry, Yonsei University College of Dentistry, analyzed the results of class II restoration cases twice in 2017 and once in 2018. Intra Class Correlation (ICC) which is a statistic used to determine the consistency of raters with three or more scores, was also calculated. ICC values increased as raters participated in rater calibration meetings and grading experiences. This shows that the rater reliability is related to the grading experience and feedback from calibration meeting. Based on the results of previous studies that grading experiences and rater calibration training can cause a meaningful change in rater behavior, we propose to conduct rater calibration training to ensure the evaluator reliability.
본 연구는 2015 개정 교육과정에서 강조하고 있는 교육과정, 수업, 평가의 일체화를 실현하기 위한 가정과 과정 중심 수행과제 개발 및 적용사례를 제시하는데 목적을 두었다. 이러한 목적에 따라 개발 절차는 수행의 명료화, 수행과제 및 채점기준 개발, 수행평가 실시 및 결과의 3단계로 수행하였으며 연구 결과는 다음과 같다. 첫째, 수행의 명료화 단계에서는 2015 개정 기술·가정 교육과정의 분석을 통해 성취기준-학습목표-평가목표가 일관성을 가지도록 평가시기, 횟수, 반영비율, 수행평가의 영역별 배점, 평가유형을 포함한 학기별 평가계획을 수립하였다. 둘째, 수행과제 및 채점기준 개발 단계에서는 교육과정 내용체계를 분석하여, 수행과제를 결정하고 과제 소요시간, 참여 방법, 산출물의 형태를 고려하여 개별과제와 모둠과제를 포함한 포트폴리오, 프로젝트 활동 및 지식시장, e-NIE 유형의 수행과제를 개발하였다. 개발된 수행과제는 교과 전문적 학습공동체 협의를 통해 타당성을 검토하고 재수정하여 세부적인 수행과제 채점기준을 개발하였다. 셋째, 수행평가 실시 및 결과 단계에서는 교사의 수업방향에 따라 교과 운영을 계획을 수립하고 교수·학습과 연계하여 블록 수업으로 시간표를 편성한 후 수행평가를 실시하였다. 이후 교과 전문적 학습공동체에서 개발된 수행평가 과제와 수행평가 산출물, 수업적용에 대한 수업성찰을 토대로 수행평가 과제를 재수정 하였다. 본 연구를 통해 학습자의 성장을 도울 수 있는 학습의 과정을 중시하는 수행과제를 개발함으로써 교사의 수업전문성과 현장의 수업개선에 기여할 수 있다.
평가는 교수와 함께 교육 목표를 이루는데 있어 핵심적인 역할을 한다. 그렇지만 평가는 교수법의 발전 속도에 비교하면 상당히 느릴 뿐만 아니라, 교사는 물론 학생들에게 부정적으로 비추어지고 있다. 본 논문에서는 시험이 학생들을 동기화시킬 뿐만 아니라 그 자체로 중요한 학습 경험임을 강조하면서, 학습을 위한 평가를 활성화시키기 위해 테크놀러지를 이용한 평가 방식들을 소개하였다. 개발을 물론 어느 정도 연구가 이루어진 테크놀러지를 활용한 평가 기법을, 수행평가와 선다형의 개선안으로 대별하였다. 수행평가를 위한 기법에서는 논술채점, 지식 지도 제작법, 그리고 학습자 모형을 이용한 평가기법이, 선다형의 개선안으로 적응형 컴퓨터화 검사, 다중평가 및 변형선다형 방식이 각각 상술되었다. 결론에서는 평가를 통한 교육 효과를 극대화하기 위해서는, 교사는 물론 학생들의 평가에 대한 태도 변화 교육과 실제 교육 현장에서 쉽게 활용될 수 있는 컴퓨터를 이용한 평가기법의 개발과 보급의 중요성이 강조되었다.
교육에 있어서 평가는 피교육자의 성장과 발달 정도를 확인하고, 교육의 질적 향상을 도모하는 중요한 요소이다. 평가의 방법에는 여러 가지가 있으나 지필시험, 객관식 고사와 같은 전통적인 평가 방식이 갖는 한계를 극복하기 위해서 수행평가가 등장하였다. 수행평가는 피교육자가 과제를 완성한 정도나 상태를 바탕으로 평가하는 방법이다. 정보활용교육은 피교육자의 정보활용능력을 신장하는데 목적이 있으며, 수행평가는 정보활용능력의 상태나 정도를 측정하는데 매우 적합하다. 수행평가를 위해서는 먼저 수행과제가 준비되어 있어야 한다. 그러나 교수자가 수행평가의 요건을 모두 고려하여 수행과제를 개발한다는 것은 쉽지 않다. 이에 본 연구에서는 교수자가 정보활용교육을 전개함에 있어서 수행과제를 쉽게 제작할 수 있도록 수행과제 개발도구를 제안하고자 한다. 본 연구에서 제안한 수행과제 개발 도구는 템플릿 형태를 취하고 있으며, 4단계 즉, 교육목적 및 학습목표, 지식과 기능, 과제 유형, 측정 및 채점기준으로 구성하였다.
본 웹사이트에 게시된 이메일 주소가 전자우편 수집 프로그램이나
그 밖의 기술적 장치를 이용하여 무단으로 수집되는 것을 거부하며,
이를 위반시 정보통신망법에 의해 형사 처벌됨을 유념하시기 바랍니다.
[게시일 2004년 10월 1일]
이용약관
제 1 장 총칙
제 1 조 (목적)
이 이용약관은 KoreaScience 홈페이지(이하 “당 사이트”)에서 제공하는 인터넷 서비스(이하 '서비스')의 가입조건 및 이용에 관한 제반 사항과 기타 필요한 사항을 구체적으로 규정함을 목적으로 합니다.
제 2 조 (용어의 정의)
① "이용자"라 함은 당 사이트에 접속하여 이 약관에 따라 당 사이트가 제공하는 서비스를 받는 회원 및 비회원을
말합니다.
② "회원"이라 함은 서비스를 이용하기 위하여 당 사이트에 개인정보를 제공하여 아이디(ID)와 비밀번호를 부여
받은 자를 말합니다.
③ "회원 아이디(ID)"라 함은 회원의 식별 및 서비스 이용을 위하여 자신이 선정한 문자 및 숫자의 조합을
말합니다.
④ "비밀번호(패스워드)"라 함은 회원이 자신의 비밀보호를 위하여 선정한 문자 및 숫자의 조합을 말합니다.
제 3 조 (이용약관의 효력 및 변경)
① 이 약관은 당 사이트에 게시하거나 기타의 방법으로 회원에게 공지함으로써 효력이 발생합니다.
② 당 사이트는 이 약관을 개정할 경우에 적용일자 및 개정사유를 명시하여 현행 약관과 함께 당 사이트의
초기화면에 그 적용일자 7일 이전부터 적용일자 전일까지 공지합니다. 다만, 회원에게 불리하게 약관내용을
변경하는 경우에는 최소한 30일 이상의 사전 유예기간을 두고 공지합니다. 이 경우 당 사이트는 개정 전
내용과 개정 후 내용을 명확하게 비교하여 이용자가 알기 쉽도록 표시합니다.
제 4 조(약관 외 준칙)
① 이 약관은 당 사이트가 제공하는 서비스에 관한 이용안내와 함께 적용됩니다.
② 이 약관에 명시되지 아니한 사항은 관계법령의 규정이 적용됩니다.
제 2 장 이용계약의 체결
제 5 조 (이용계약의 성립 등)
① 이용계약은 이용고객이 당 사이트가 정한 약관에 「동의합니다」를 선택하고, 당 사이트가 정한
온라인신청양식을 작성하여 서비스 이용을 신청한 후, 당 사이트가 이를 승낙함으로써 성립합니다.
② 제1항의 승낙은 당 사이트가 제공하는 과학기술정보검색, 맞춤정보, 서지정보 등 다른 서비스의 이용승낙을
포함합니다.
제 6 조 (회원가입)
서비스를 이용하고자 하는 고객은 당 사이트에서 정한 회원가입양식에 개인정보를 기재하여 가입을 하여야 합니다.
제 7 조 (개인정보의 보호 및 사용)
당 사이트는 관계법령이 정하는 바에 따라 회원 등록정보를 포함한 회원의 개인정보를 보호하기 위해 노력합니다. 회원 개인정보의 보호 및 사용에 대해서는 관련법령 및 당 사이트의 개인정보 보호정책이 적용됩니다.
제 8 조 (이용 신청의 승낙과 제한)
① 당 사이트는 제6조의 규정에 의한 이용신청고객에 대하여 서비스 이용을 승낙합니다.
② 당 사이트는 아래사항에 해당하는 경우에 대해서 승낙하지 아니 합니다.
- 이용계약 신청서의 내용을 허위로 기재한 경우
- 기타 규정한 제반사항을 위반하며 신청하는 경우
제 9 조 (회원 ID 부여 및 변경 등)
① 당 사이트는 이용고객에 대하여 약관에 정하는 바에 따라 자신이 선정한 회원 ID를 부여합니다.
② 회원 ID는 원칙적으로 변경이 불가하며 부득이한 사유로 인하여 변경 하고자 하는 경우에는 해당 ID를
해지하고 재가입해야 합니다.
③ 기타 회원 개인정보 관리 및 변경 등에 관한 사항은 서비스별 안내에 정하는 바에 의합니다.
제 3 장 계약 당사자의 의무
제 10 조 (KISTI의 의무)
① 당 사이트는 이용고객이 희망한 서비스 제공 개시일에 특별한 사정이 없는 한 서비스를 이용할 수 있도록
하여야 합니다.
② 당 사이트는 개인정보 보호를 위해 보안시스템을 구축하며 개인정보 보호정책을 공시하고 준수합니다.
③ 당 사이트는 회원으로부터 제기되는 의견이나 불만이 정당하다고 객관적으로 인정될 경우에는 적절한 절차를
거쳐 즉시 처리하여야 합니다. 다만, 즉시 처리가 곤란한 경우는 회원에게 그 사유와 처리일정을 통보하여야
합니다.
제 11 조 (회원의 의무)
① 이용자는 회원가입 신청 또는 회원정보 변경 시 실명으로 모든 사항을 사실에 근거하여 작성하여야 하며,
허위 또는 타인의 정보를 등록할 경우 일체의 권리를 주장할 수 없습니다.
② 당 사이트가 관계법령 및 개인정보 보호정책에 의거하여 그 책임을 지는 경우를 제외하고 회원에게 부여된
ID의 비밀번호 관리소홀, 부정사용에 의하여 발생하는 모든 결과에 대한 책임은 회원에게 있습니다.
③ 회원은 당 사이트 및 제 3자의 지적 재산권을 침해해서는 안 됩니다.
제 4 장 서비스의 이용
제 12 조 (서비스 이용 시간)
① 서비스 이용은 당 사이트의 업무상 또는 기술상 특별한 지장이 없는 한 연중무휴, 1일 24시간 운영을
원칙으로 합니다. 단, 당 사이트는 시스템 정기점검, 증설 및 교체를 위해 당 사이트가 정한 날이나 시간에
서비스를 일시 중단할 수 있으며, 예정되어 있는 작업으로 인한 서비스 일시중단은 당 사이트 홈페이지를
통해 사전에 공지합니다.
② 당 사이트는 서비스를 특정범위로 분할하여 각 범위별로 이용가능시간을 별도로 지정할 수 있습니다. 다만
이 경우 그 내용을 공지합니다.
제 13 조 (홈페이지 저작권)
① NDSL에서 제공하는 모든 저작물의 저작권은 원저작자에게 있으며, KISTI는 복제/배포/전송권을 확보하고
있습니다.
② NDSL에서 제공하는 콘텐츠를 상업적 및 기타 영리목적으로 복제/배포/전송할 경우 사전에 KISTI의 허락을
받아야 합니다.
③ NDSL에서 제공하는 콘텐츠를 보도, 비평, 교육, 연구 등을 위하여 정당한 범위 안에서 공정한 관행에
합치되게 인용할 수 있습니다.
④ NDSL에서 제공하는 콘텐츠를 무단 복제, 전송, 배포 기타 저작권법에 위반되는 방법으로 이용할 경우
저작권법 제136조에 따라 5년 이하의 징역 또는 5천만 원 이하의 벌금에 처해질 수 있습니다.
제 14 조 (유료서비스)
① 당 사이트 및 협력기관이 정한 유료서비스(원문복사 등)는 별도로 정해진 바에 따르며, 변경사항은 시행 전에
당 사이트 홈페이지를 통하여 회원에게 공지합니다.
② 유료서비스를 이용하려는 회원은 정해진 요금체계에 따라 요금을 납부해야 합니다.
제 5 장 계약 해지 및 이용 제한
제 15 조 (계약 해지)
회원이 이용계약을 해지하고자 하는 때에는 [가입해지] 메뉴를 이용해 직접 해지해야 합니다.
제 16 조 (서비스 이용제한)
① 당 사이트는 회원이 서비스 이용내용에 있어서 본 약관 제 11조 내용을 위반하거나, 다음 각 호에 해당하는
경우 서비스 이용을 제한할 수 있습니다.
- 2년 이상 서비스를 이용한 적이 없는 경우
- 기타 정상적인 서비스 운영에 방해가 될 경우
② 상기 이용제한 규정에 따라 서비스를 이용하는 회원에게 서비스 이용에 대하여 별도 공지 없이 서비스 이용의
일시정지, 이용계약 해지 할 수 있습니다.
제 17 조 (전자우편주소 수집 금지)
회원은 전자우편주소 추출기 등을 이용하여 전자우편주소를 수집 또는 제3자에게 제공할 수 없습니다.
제 6 장 손해배상 및 기타사항
제 18 조 (손해배상)
당 사이트는 무료로 제공되는 서비스와 관련하여 회원에게 어떠한 손해가 발생하더라도 당 사이트가 고의 또는 과실로 인한 손해발생을 제외하고는 이에 대하여 책임을 부담하지 아니합니다.
제 19 조 (관할 법원)
서비스 이용으로 발생한 분쟁에 대해 소송이 제기되는 경우 민사 소송법상의 관할 법원에 제기합니다.
[부 칙]
1. (시행일) 이 약관은 2016년 9월 5일부터 적용되며, 종전 약관은 본 약관으로 대체되며, 개정된 약관의 적용일 이전 가입자도 개정된 약관의 적용을 받습니다.