• 제목/요약/키워드: evaluation question

검색결과 497건 처리시간 0.024초

대통령 국정수행 지지도 조사의 개선에 대한 연구 (A Study on Improvement of Presidential Job Approval in the Poll Survey)

  • 배종찬
    • 한국조사연구학회지:조사연구
    • /
    • 제13권1호
    • /
    • pp.113-134
    • /
    • 2012
  • 대통령 지지도는 대통령 자신에 대한 정치적인 성취뿐만 아니라 국민과 관련된 정책 결정 및 추진에 있어 중요한 기준이 된다는 측면에서 매우 중요하다. 그럼에도 불구하고 기존의 대통령 지지도 측정 방식은 현실적인 체감적인 만족과는 상당한 격차를 느끼게 할 정도로 측정 자체에 많은 문제점을 보여 주었다. 본 연구의 목적은 대통령의 국정수행 지지도를 측정하는 문항의 구성과 조사결과의 활용에 있어 현행 방식의 문제점을 지적하고 새로운 개선방안을 제시하기 위함이다. 첫째로 설문기획 측면에서 '대통령 국정수행'을 평가하는 성격의 설문구성은 부적절하다는 것을 도출할 수 있었다. '대통령으로서의 일'을 모르는 응답자들이 '잘하는지와 못하는지'를 알지 못하기 때문이다. 그리고 보기 척도에서도 응답자의 응답가능성을 기초할 때 4점 척도의 보기 구성보다 5점 척도의 보기 구성이 타당함을 밝힐 수 있었다. 둘째로 통계분석 측면에서 대통령 국정수행 평가 문항(잘하는지와 못하는지를 응답하는 문항)과 정책관련 문항, 직접적으로 대통령에 대한 지지도를 물어보는 문항과의 상관분석을 시도하였다. 이를 통해 결국 대통령 국정수행 평가는 적절하지 않으며 대통령에 대해 직접적인 지지 여부를 물어보는 것이 가장 설명력이 있다는 것을 알 수 있었다. 마지막으로 결과활용 측면에서 대통령의 지지도가 '높고 낮음'은 언론 매체의 주관적인 판단에 의존할 것이 아니라 조사 자체의 응답자들을 대상으로 상대적으로 도출하여 대통령 지지도의 결과값과 비교하는 것이 더 설득력이 있다고 보았다.

  • PDF

대통령 국정수행 지지도 조사의 개선에 대한 연구 (A Study on Development of Presidential Preference in the Poll Survey)

  • 배종찬
    • 한국조사연구학회:학술대회논문집
    • /
    • 한국조사연구학회 2011년도 추계학술대회 발표논문집
    • /
    • pp.63-81
    • /
    • 2011
  • 본 연구의 목적은 대통령의 국정 수행 지지도를 측정하는 문항의 구성과 조사 결과의 활용에 있어 현행 방식의 문제점을 지적하고 새로운 개선방안을 제시하기 위함이다. 대통령 지지도는 대통령 자신에 대한 정치적인 성취뿐만 아니라 국민과 관련된 정책 결정 및 추진에 있어 중요한 기준이 된다는 측면에서 매우 중요하다. 그럼에도 불구하고 기존의 대통령 지지도 측정 방식은 현실적인 체감 만족과는 상당한 격차를 느끼게 할 정도로 많은 문제점을 보여 주었다. 이 연구를 통해 첫째로 설문기획 측면에서 '대통령 국정 수행'을 평가하는 성격의 설문 구성은 부적절하다는 것을 도출할 수 있었다. '대통령으로서의 일'을 모르는 응답자들이 '잘하는지와 못하는지'를 알지 못하기 때문이다. 그리고 보기 척도에서도 응답자의 응답가능성을 기초할 때 4점척도 보기 구성보다 5점척도 보기 구성이 타당함을 밝힐 수 있었다. 둘째로 통계분석 측면에서 대통령 국정수행 평가 문항(잘하는 지와 못하는 지를 응답하는 문항)과 정책관련 문항, 직접적으로 대통령에 대한 지지도를 물어보는 문항과의 상관분석을 시도하였다. 이를 통해 결국 대통령 국정 수행 평가는 적절하지 않으며 대통령에 대해 직접적인 지지 여부를 물어보는 것이 가장 설명력이 있다는 것을 알 수 있었다. 마지막으로 결과활용 측면에서 대통령의 지지도가 '높고 낮음'은 언론 매체의 주관적인 판단에 의존할 것이 아니라 조사 자체의 응답자들을 대상으로 상대적으로 도출하여 대통령 지지도의 결과값과 비교하는 것이 더 설득력이 있다고 보았다.

  • PDF

학생표준화환자를 사용한 한의과대학 진료수행시험(CPX)에 대한 학생 인식 조사 (A Survey on Students' Perception of Clinical Performance Examination (CPX) in College of Korean Medicine Using Student Standardized Patients)

  • 조학준;노정두;성현경;박정수
    • 대한예방한의학회지
    • /
    • 제24권3호
    • /
    • pp.1-13
    • /
    • 2020
  • Objectives : The objective of this survey was to examine students' perception of the clinical performance examination (CPX) in college of traditional Korean medicine using student standardized patients. Methods : College of traditional Korean medicine students who completed the first-semester clinical practice education were selected as the subjects, and they participated in a survey asking questions about the following matters: satisfaction with CPX, self-evaluation, difficulties experienced during the CPX course, level of prior knowledge of clinical practice education, and usefulness of and intimacy with Student Standardized Patients (SSP). Results : Satisfaction with CPX was calculated to be 4.10 (5 being the perfect score), and self-evaluation of CPX was calculated to be 4.12. The subjects chose physical examination as the most difficult item relating to CPX. 80.5% responded positively to the question relating to diverse experiences in practice education, and 52.8% responded positively to the question relating to prior knowledge of diverse standardized patients. 55.6% responded positively to the question relating to performance proficiency of SSP, 63.9% responded positively to the question relating to usefulness of SSP to prepare for CPX, and 69.4% responded positively to the question relating to usefulness of SSP in evaluating CPX, and 55.6% responded positively to the questions relating to intimacy with SSP. It was confirmed that there was a strong quantitative correlation between prior knowledge of clinical practice education and usefulness of SSP, and that there was a strong quantitative correlation between performance proficiency of SSP and usefulness of SSP. It was confirmed that there was a middle-level correlation between performance proficiency of SSP and intimacy with SSP, and that there was a middle-level quantitative correlation between intimacy with SSP and usefulness of SSP. Conclusions : It was confirmed that senior students enrolled in college of traditional Korean medicine were mostly satisfied with the clinical performance examination in college of traditional Korean medicine using SSP, and that usefulness of SSP had a quantitative correlation with prior knowledge of diverse clinical practice educations, performance proficiency of SSP, and intimacy with SSP.

평가를 통한 수학 학습지도에 관한 연구 (A Study on Mathematics Teaching through Evaluations)

  • 서종진;윤연수
    • 한국학교수학회논문집
    • /
    • 제13권2호
    • /
    • pp.185-203
    • /
    • 2010
  • 학생들의 수학 학습 정도는 학교수학의 각 영역이나 내용에 따라 다양하게 나타날 수 있다. 이러한 수학 학습상황을 평가하고 활용하기 위한 통합적인 평가 틀의 구성은 유용하다. 본 논문에서는 일차방정식의 내용으로 한정하여 유형별 평가와 문항별 평가에 대한 평가표를 구성하였으며, 두 가지 평가를 기초로 종합평가를 통한 수학 학습 지도에 대하여 알아보았다. 구성한 평가표는 학생 개개인의 학습 상황에 대한 정보를 제공함으로 개별적인 수학 학습 지도에 유용하다.

  • PDF

중소기업 맞춤형 기술보호 수준평가 모델 연구 (Evaluation Model of Technology Protection Competency customized for Small and Medium-sized Enterprises)

  • 박상훈;조남욱
    • 디지털산업정보학회논문지
    • /
    • 제13권2호
    • /
    • pp.113-125
    • /
    • 2017
  • In today's highly competitive environment, the importance of technology protection cannot be overemphasized. To evaluate technology protection competency of Small and Medium-sized Enterprises(SMEs), Government has conducted surveys every year but its effectiveness is still in question. To enhance the effectiveness of technology protection for SMEs, a customized evaluation model of technology protection competency has been suggested in this study. Surveys are conducted to measure the relative importance of evaluation areas that can be influenced by the size and type of business. The analysis shows that there exists significant differences between evaluation areas. This study suggests that the effectiveness of technology protection can be enhanced by utilizing a customized evaluation model depending on the size and type of business. Also, the proposed model can be used for SMEs to identify and enhance their weakness in technology protection. Overall, it is expected that the proposed model can be effectively used to protect valuable technologies in various SMEs.

데이터 마이닝을 이용한 시험 응답데이터 분석시스템 설계 및 구현 (Design and Implementation of Analysis System for Answer Dataset with Data Mining)

  • 곽은영;김현철
    • 컴퓨터교육학회논문지
    • /
    • 제11권1호
    • /
    • pp.65-74
    • /
    • 2008
  • 본 논문은 데이터 마이닝 기법 중 연관규칙 추출 알고리즘을 이용하여 시험 응답 데이터에서 서로 연관된 문항들을 찾아내고, 그 원인을 규명함으로써 교육평가에서 사용되고 있는 기존의 검사이론 기반의 분석 결과와 함께 사용되면 문항의 질뿐만 아니라 피험자의 성취 수준을 심층적으로 분석하는데 도움을 줄 수 있는 시험 응답데이터 분석시스템을 개발하고 구현하는데 연구의 목적이 있다. 현재의 교육평가 분야에서 문항 분석에 사용되는 고전검사 이론과 문항반응 이론은 각 문항의 독립성을 전제로 하고, 피험자들이 각 개별 문항에 반응하여 나타나는 결과를 통계적 수치를 이용하여 설명하고 있다. 그러나 실제 학교 현장에서 실시한 시험의 결과를 보면, 피험자들의 반응에 의하여 문항간 연관성이 발생하게 되며 이러한 연관성은 각각의 문항들을 분석하고 피험자의 능력을 추정하는 데 의미 있는 영향을 미치게 된다. 제안된 시스템은 연관규칙 마이닝을 이용하여 흥미로운 문항간 연관성을 추출하고, 그 원인을 분석하여 사용자에게 제공함으로써 교수-학습 방법 개선이나 문제은행의 질을 향상시키는데 도움을 줄 수 있도록 하였다.

  • PDF

중학교 과학과 총괄 지필평가 문항의 목표 분석 (Analysis of Summative Evaluation Objectives in Middle school Science Examination by Klopfer's Taxonomy of Educational Objectives)

  • 박현주
    • 과학교육연구지
    • /
    • 제36권2호
    • /
    • pp.293-302
    • /
    • 2012
  • 이 연구는 중학교 1학년 과학과 총괄 지필평가 출제경향을 조사하기 지필평가 문항의 행동영역, 내용영역, 문항유형, 난이도에 대하여 조사 분석하였다. 10개의 중학교의 1차와 2차 지필평가 문항의 총 645개를 연구대상으로 하여 분석하였다. 연구결과는 다음과 같다. 첫째, 지필평가 문항의 행동영역은 '지식, 이해' 수준으로 편중되어 있으며, 적용, 분석, 종합, 평가 영역의 문항은 거의 출제가 되고 있지 않았다. 둘째, 내용영역은 기존의 연구의 결과에 비해 과학적 탐구과정의 출제 빈도수가 많아졌지만, 여전히 과학지식을 묻는 문항이 과학적 탐구과정의 문항과 비교하여 두 배 이상의 비율로 출제되고 있음을 알 수 있었다. 셋째, 문항유형은 선다형 문항 중심으로 출제 되고 있는 것으로 조사되었다. 넷째, 정답률을 기준으로 문항의 난이도를 분석한 결과, 전체적인 빈도수에서 '상'에 해당하는 문항의 비율은 교사가 목표로 하는 난이도 비율보다 낮았으며, '중'의 비율은 교사가 생각하는 난이도 비율보다 높은 것으로 조사되었다. 과학학습에 대한 다양한 영역의 총체적인 평가를 위해서는 교사의 평가 및 문항 개발의 전문성 신장에 대한 노력이 이루어져야 할 것이다.

  • PDF

머신러닝을 활용한 프로그래밍언어 객관식 문제의 난이도 조정에 대한 연구 (A study on the difficulty adjustment of programming language multiple-choice problems using machine learning)

  • 김은정
    • 한국산업정보학회논문지
    • /
    • 제27권2호
    • /
    • pp.11-24
    • /
    • 2022
  • LMS 기반의 온라인 평가를 위해 출제되는 문제들은 교수자가 직접 출제하거나 또는 카테고리별로 나뉘어진 문제은행에서 난이도에 따른 자동 출제 방식을 주로 이용한다. 이중에서 난이도에 따른 자동출제 방식은 평가자들에게 출제되는 문제가 서로 다를수 있기 때문에 무엇보다 객관적이고 효율적인 방법으로 문제의 난이도를 관리하는 것이 중요하다. 본 논문에서는 문제의 정답률뿐만 아니라 해당 문제를 해결하는데 사용된 소요시간을 같이 고려한 난이도 재조정 알고리즘을 제시한다. 이를 위해 머신러닝의 로지스틱 회귀 분류 알고리즘을 이용하였으며, 학습모델의 예측 확률값을 기반으로 기준 임계값을 설정하여 각 문항별 난이도 재조정에 활용하였다. 그 결과 정답률에만 의존한 문항별 난이도에 많은 변화가 일어남을 확인할 수 있었다. 또한 조정된 난이도의 문제를 이용하여 그룹별 평가를 수행한 결과, 정답률 기반의 난이도 문제에 비해서 대부분의 그룹에서 평균 점수가 향상됨을 확인할 수 있었다.

Using Syntax and Shallow Semantic Analysis for Vietnamese Question Generation

  • Phuoc Tran;Duy Khanh Nguyen;Tram Tran;Bay Vo
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제17권10호
    • /
    • pp.2718-2731
    • /
    • 2023
  • This paper presents a method of using syntax and shallow semantic analysis for Vietnamese question generation (QG). Specifically, our proposed technique concentrates on investigating both the syntactic and shallow semantic structure of each sentence. The main goal of our method is to generate questions from a single sentence. These generated questions are known as factoid questions which require short, fact-based answers. In general, syntax-based analysis is one of the most popular approaches within the QG field, but it requires linguistic expert knowledge as well as a deep understanding of syntax rules in the Vietnamese language. It is thus considered a high-cost and inefficient solution due to the requirement of significant human effort to achieve qualified syntax rules. To deal with this problem, we collected the syntax rules in Vietnamese from a Vietnamese language textbook. Moreover, we also used different natural language processing (NLP) techniques to analyze Vietnamese shallow syntax and semantics for the QG task. These techniques include: sentence segmentation, word segmentation, part of speech, chunking, dependency parsing, and named entity recognition. We used human evaluation to assess the credibility of our model, which means we manually generated questions from the corpus, and then compared them with the generated questions. The empirical evidence demonstrates that our proposed technique has significant performance, in which the generated questions are very similar to those which are created by humans.

ESL 학습자의 쓰기배치고사상의 오배치에 따른 이해도 차이 연구 (Filling the understanding gap of the misplacement of ESL learner's writing placement test)

  • 김정태
    • 영어어문교육
    • /
    • 제12권3호
    • /
    • pp.147-166
    • /
    • 2006
  • This study investigates the effect of misplacement in a written Computer-delivered ESL Placement Test (CEPT) context. The study aims to address the following two research questions: a) which scoring rubric features cause the misplacement of ESL learner's writing scores? and b) which scoring rubric features improve ESL learner's writing scores? Thirty-four international examinees took the test and participated in surveys at the University of Illinois. Twelve examinees of them attended the CEPT workshop test. In the workshop test, they carried out self-evaluation on their first essays using a scoring rubric and compared with expert raters' results. After the workshop, the examinees responded to a survey and interview. For the first research question, the results of the survey and interview addressed that the majority disagreed with the raters' rating results. The self-evaluation results also indicated that their misunderstanding of organization feature caused the misplacement. For the second question, the CEPT workshop scores were improved due to the score improvement in the organization feature while the contribution of other features to the total scores was little. Most of the examinees pointed out that a lesson on the scoring rubric enhanced their understanding of the writing features of the rubric so that their placement scores were generally improved.

  • PDF