• 제목/요약/키워드: Correct Answer Rate

검색결과 114건 처리시간 0.026초

국가수준 학업성취도 평가의 성취수준별 정답률 편차에 따른 내용 영역과 행동 영역 특성 분석 (The Characteristic Analysis of Content Areas and Behavioral Areas Based on the Deviation of NAEA Achievement Level-Based Correct-Answer Rate)

  • 허난;양성현
    • 한국수학교육학회지시리즈E:수학교육논문집
    • /
    • 제32권3호
    • /
    • pp.435-453
    • /
    • 2018
  • 국가수준 학업성취도 평가의 결과 분석은 학교 현장에 교수 학습 측면에서 다양한 시사점을 제공해 줄 수 있다. 본 연구에서는 2009 개정 수학과 교육과정이 중학교 국가수준 학업성취도 평가에 적용된 2015년부터 2017년까지 3개년 동안의 국가수준 학업성취도 평가의 답지 반응 분포와 성취수준별(우수학력, 보통학력, 기초학력) 정답률 편차를 분석하였다. 우수학력 수준과 보통학력 수준, 보통학력 수준과 기초학력 수준 사이의 정답률 편차를 계산하고 편차의 누적백분율 제3사분위수 이상의 문항을 선별한 후, 내용 영역과 행동 영역은 무엇이며 이러한 문항들의 성취기준 및 특성들을 탐색하였다. 분석 결과를 토대로 성취수준별 교수 학습 방법에 대한 시사점을 도출하고자 하였다.

Comparative Study of Korean and Chinese University Students' Economics and Business Literacy

  • CHOI, Byoung-Il
    • 동아시아경상학회지
    • /
    • 제10권1호
    • /
    • pp.95-108
    • /
    • 2022
  • Purpose - This study attempts a multifaceted analysis utilizing the Chinese test takers' results of the Economy & Business Aptitude Test. Since Chinese students study socialist theories of economics along with market-based ones, comparing Chinese university students' basic knowledge of economics and business and its application to those of Korean test takers is also very meaningful from the perspective of economics education research. Research design, data, and methodology - This study investigates the results on the test of economy and business understanding between Korea and China. For comparison of the result, we conducted MK-TEST for two universities in China. Result - This study finds that the average correct answer rate of Korea is higher than one of China according to the overall results. The average difference rate is about 15% between Korea and China. More concretely, the correct answer rate of business area is higher than one of economy area, identifying them by subject area. Conclusion - According to the results, this study can infer that there are no or little differences in the ability of examinee to solve applied questions between Korea and China and the differences of the scope and emphasis point in an academic curriculum between both countries might bring these kinds of results. Finally, Chinese students shows higher correct answer rate to the questions about the economy issues and policies related to China than one of Korea examinee.

A Study on DNN-based STT Error Correction

  • Jong-Eon Lee
    • International journal of advanced smart convergence
    • /
    • 제12권4호
    • /
    • pp.171-176
    • /
    • 2023
  • This study is about a speech recognition error correction system designed to detect and correct speech recognition errors before natural language processing to increase the success rate of intent analysis in natural language processing with optimal efficiency in various service domains. An encoder is constructed to embedded the correct speech token and one or more error speech tokens corresponding to the correct speech token so that they are all located in a dense vector space for each correct token with similar vector values. One or more utterance tokens within a preset Manhattan distance based on the correct utterance token in the dense vector space for each embedded correct utterance token are detected through an error detector, and the correct answer closest to the detected error utterance token is based on the Manhattan distance. Errors are corrected by extracting the utterance token as the correct answer.

데이터마이닝 기법을 활용한 대학수학능력시험 영어영역 정답률 예측 및 주요 요인 분석 (Prediction of Correct Answer Rate and Identification of Significant Factors for CSAT English Test Based on Data Mining Techniques)

  • 박희진;장경애;이윤호;김우제;강필성
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제4권11호
    • /
    • pp.509-520
    • /
    • 2015
  • 대학수학능력시험(수능)은 고등학교 3년간의 학업 성취도를 측정하는 대표적인 평가 도구로서 대한민국 대학 입시에 있어 매우 중요한 역할을 하는 시험이다. 응시생들의 학업 성취도를 효과적으로 평가하기 위해서는 수능의 난이도가 적절하게 조절되어야 하나 지금까지는 수능 난이도의 편차가 매우 크게 나타나 매 입시연도마다 여러 가지 문제점을 야기해왔다. 본 연구에서는 전문가의 판단에 의존한 기존 방식에서 벗어나 지금까지 시행된 모의고사 및 실제 시험을 통해 축적된 자료를 바탕으로 데이터마이닝 기법을 적용하여 영어영역 문제의 난이도를 예측하는 모델을 구축하고 난이도 예측에 영향을 미치는 요소를 판별하고자 한다. 이를 위해 각 문항의 특성을 판별할 수 있는 여러 지표와 함께 지문, 문제, 답안 등에 나타난 단어들의 특징을 토픽 모델링(topic modeling) 기법을 이용하여 정량화하고 이를 바탕으로 선형회귀분석 및 의사결정나무 기법을 이용하여 각 문항의 난이도를 예측하는 모델을 구축하였다. 구축된 예측 모델을 실제 문제에 적용한 결과 난이도의 상/하 구분에 대한 예측 정확도는 90% 수준으로 나타났으며, 실제 정답률 대비 오차 비율은 약 16% 이내인 것으로 나타났다. 또한 배점 및 문제 유형이 문제의 난이도에 큰 영향을 미치며 지문이 특정 주제에 관련된 경우에도 난이도에 영향을 미치는 것을 확인하였다. 본 연구에서 제시된 방법론을 이용하여 영어영역 각 문제들에 대한 기대 정답률의 범위를 추정할 수 있으며 이를 종합하여 영어영역 전체 문제에 대한 정답률 예측을 통해 적절한 난이도의 문제를 출제하는 데 기여할 수 있을 것으로 기대한다.

ChatGPT의 경찰 관련 교통법규 응답 능력에 대한 탐색적 연구 - 운전면허 학과시험과 도로교통사고감정사 1차 시험을 대상으로 - (An Exploratory Study on ChatGPT's Performance to Answer to Police-related Traffic Laws: Using the Driver's License Test and the Road Traffic Accident Appraiser)

  • 이상엽
    • 디지털정책학회지
    • /
    • 제2권4호
    • /
    • pp.1-10
    • /
    • 2023
  • 본 연구는 경찰교통에서의 효과적 ChatGPT 활용 방안 도출을 위한 사전 연구로서 운전면허 학과시험과 도로교통사고감정사 시험에 대한 ChatGPT의 응답을 분석하였다. ChatGPT가 뛰어난 성능과 접근성으로 여러 분야에서 기대를 받고 있으나 경찰 교통법규와 같이 고도의 정확성이 요구되는 분야에서는 사전에 그 성능과 한계를 탐색할 필요가 있다. 이에 본 연구에서는 운전면허 학과시험 문제은행과 도로교통사고감정사 1차 시험을 대상으로 파이썬 코드로 OpenAI API를 이용해 30회의 반복 실험으로 ChatGPT의 응답을 수집하고 응답 결과를 바탕으로 시험별·연도별·내용 영역별 정답률, 일관성 능력을 분석하였다. 분석 결과 첫째, 운전면허 학과시험 및 도로교통사고감정사 1차 시험의 평균 정답률은 각 44.60%, 35.45%로 합격기준보다 낮았다. 연도별로는 2022년 이후 정답률이 평균 정답률을 하회했다. 둘째, 영역별 정답률은 29.69%~56.80%로 나타나 큰 편차를 보였다. 셋째, 정답을 맞힌 경우 95% 이상 일관되게 같은 응답을 출력하였다. ChatGPT의 효과적 활용을 위해서는 사용자의 전문 지식, 평가 데이터 및 방법 마련, 양질의 교통법규 말뭉치 설계와 주기적 학습이 필요하다고 판단된다.

AN IMPLEMENTATION AND EVALUATION OF RANDOMIZED-ANN SIMULATOR USING A PC CLUSTER

  • Morita, Yoshiharu;Nakagawa, Tohru;Kitagawa, Hajime
    • 한국시뮬레이션학회:학술대회논문집
    • /
    • 한국시뮬레이션학회 2001년도 The Seoul International Simulation Conference
    • /
    • pp.99-102
    • /
    • 2001
  • We propose a PC cluster using general-purpose microprocessors and a high-speed network for simulating ANN (Artificial Neural Network) processes on Linux OS. We apply this cluster to intelligent information processing such as ANN simulation. The elapsed time for simulating ANNs can be reduced from 7,295 seconds by a PE (Processing Element) to 1,226 seconds by six PEs. The reliability of a pattern-classification using ANNs can be improved by the proposed ANN, Randomized-ANN. In order to generate a Randomized-ANN, we choose three ANNs and combine the output results from three huts by means of logical AND. Results are as follows: The mean correct answer rate is 94.4%, the mean wrong answer rate is only 0.1 %, and the mean unknown answer rate is 5.5 %. We make sure that Randomized-ANN approach reduces the mean wrong answer rate within a tenth part and improves the reliability of Japanese coin classification.

  • PDF

생성형 인공지능의 수학 문제 풀이에 대한 성능 분석: ChatGPT 4, Claude 3 Opus, Gemini Advanced를 중심으로 (Analysis of generative AI's mathematical problem-solving performance: Focusing on ChatGPT 4, Claude 3 Opus, and Gemini Advanced)

  • 오세준;윤정은;정유진;조윤주;심효섭;권오남
    • 한국수학교육학회지시리즈A:수학교육
    • /
    • 제63권3호
    • /
    • pp.549-571
    • /
    • 2024
  • 디지털·AI 기반 교수·학습이 강조됨에 따라 생성형 AI의 교육적 활용에 대한 논의가 활발해지고 있다. 본 연구는 고등학교 1학년 수학 교과서 5종의 예제와 문제 풀이에 대한 ChatGPT 4, Claude 3 Opus, Gemini Advanced의 수학적 성능을 분석하였다. 총 1,317개 문항에 대해 전체 정답률과 기능별 특징을 살펴본 결과, ChatGPT 4의 전체 정답률이 0.85로 가장 높았고, Claude 3 Opus가 0.67, Gemini Advanced가 0.42 순으로 나타났다. 기능별로는 함수 구하기와 증명하기에서 세 모델 모두 높은 정답률을 보였으나, 설명하기와 그래프 그리기에서는 상대적으로 낮은 정답률을 보였다. 특히 경우의 수 세기에서 ChatGPT 4와 Claude 3 Opus가 1.00의 정답률을 보인 반면, Gemini Advanced는 0.56으로 낮았다. 또한 모든 모델이 벤 다이어그램을 이용한 설명하기와 이미지 생성이 필요한 문제에서 어려움을 겪었다. 연구 결과를 바탕으로 교사들은 각 AI 모델의 강점과 한계를 파악하고 이를 수업에 적절히 활용할 수 있을 것이다. 본 연구는 생성형 AI의 수학적 성능을 분석함으로써, 실제 수학 수업에서의 생성형 AI의 활용 가능성을 제시했다는 점에서 의의가 있다. 또한 인공지능시대의 수학 교육에서 교사의 역할을 재정립하는 데 중요한 시사점을 제공하였다. 향후 생성형 AI와 교사의 협력적 교육 모델 개발, AI를 활용한 개별화 학습 방안 연구 등이 필요할 것이다.

적응형 온라인 학습환경에서 학습자 특성 및 AI튜터 추천문항 학습활동의 학업성취도 예측력 탐색 (An Inquiry into Prediction of Learner's Academic Performance through Learner Characteristics and Recommended Items with AI Tutors in Adaptive Learning)

  • 최민선;정재삼
    • 한국IT서비스학회지
    • /
    • 제20권4호
    • /
    • pp.129-140
    • /
    • 2021
  • Recently, interest in AI tutors is rising as a way to bridge the educational gap in school settings. However, research confirming the effectiveness of AI tutors is lacking. The purpose of this study is to explore how effective learner characteristics and recommended item learning activities are in predicting learner's academic performance in an adaptive online learning environment. This study proposed the hypothesis that learner characteristics (prior knowledge, midterm evaluation) and recommended item learning activities (learning time, correct answer check, incorrect answer correction, satisfaction, correct answer rate) predict academic achievement. In order to verify the hypothesis, the data of 362 learners were analyzed by collecting data from the learning management system (LMS) from the perspective of learning analytics. For data analysis, regression analysis was performed using the regsubset function provided by the leaps package of the R program. The results of analyses showed that prior knowledge, midterm evaluation, correct answer confirmation, incorrect answer correction, and satisfaction had a positive effect on academic performance, but learning time had a negative effect on academic performance. On the other hand, the percentage of correct answers did not have a significant effect on academic performance. The results of this study suggest that recommended item learning activities, which mean behavioral indicators of interaction with AI tutors, are important in the learning process stage to increase academic performance in an adaptive online learning environment.

일부지역 근로자의 AIDS에 대한 보건교육을 통한 지식 및 태도의 변화 (A study of the effect of health education about AIDS related knowledge and attitude in industrial workers)

  • 안태성
    • 지역사회간호학회지
    • /
    • 제6권1호
    • /
    • pp.114-124
    • /
    • 1995
  • The purpose of this study was to identify the education effect about AIDS related knowledge & attitude in industrial workers. This study examined the workers' knowledge and attitude at two times. (before education, 3days after education) This study 298 admitted workers on 3 work place who participated in health education by video material. Data were gathered from 1994. 12. 12 to 1994. 12. 22. The results were as follow: 1. The level of knowledge about AIDS; The correct answer mean score of knowledge before education was 13.7 out of 28. The correct answer mean score of knowledge after education was 17.6 out of 28. 2. The education effect about AIDS related knowledge according to 28 questions; Almost of questions were significantly increased correct answer rate about AIDS related knowledge except 2 questions. 3. The education effect about AIDS related knowledge according to workers' general characteristics: The significant general characteristics of health education effect that impact on the knowledge score were women, the teenth, the twentieth, unmarrige state, lower senior high school graduated, sexual experience had or not, over five occupational career, education time, health education experience had or not. 4. The education effect of AIDS related attitude: Significant change of attitude related AIDS were found 7 out of 9 questions.

  • PDF

요양보호사의 응급상황 및 교육 경험, 응급처치 지식 및 교육요구도 (Experience of Emergency Situation and Experience of Education, First Aid Knowledge and Educational Needs of Caregivers)

  • 김순옥;김수연
    • 한국보건간호학회지
    • /
    • 제32권2호
    • /
    • pp.288-303
    • /
    • 2018
  • Purpose: This study was a descriptive research to provide basic data for the development of a customized emergency education program to strengthen the capacity of first aid for nursing caregivers. Method: The number of caregivers in region G was 193, and data collection was conducted from April 1 to April 30, 2018. Data were analyzed using a t-test, one-way ANOVA, Pearson's correlation coefficients, and Scheffe test. Results: In the study group 47.2% experienced an emergency situation. The first aid knowledge was 10.21; the correct answer rate was 56.0%; the basic CPR knowledge was 3.99; the correct answer rate was 49.7%. After asking for help, first aid was the most difficult. In general first aid knowledge was 6.21 points and the correct answer rate was 62.2%. They understood well about strokes, injuries and trauma, but had difficulty in consciousness, depression, and burns. For first aid knowledge, there were significant differences according to age, working hours, place of work, working experience, emergency situation, and education. Of the study group, 59.6% experienced emergency training, 96.9% wanted it, and 72.0% had low emergency response skills. Moreover, 93.3% answered for having emergency education. Conclusion: The results suggest that a personalized emergency education program for nursing caregivers should be developed and applied.