• 한국과학교육학회지
• /
• 제19권1호
• /
• pp.146-158
• /
• 1999

본 연구에서는 과학 탐구능력을 구성하는 하위 요소들 중에서 변인확인 능력을 측정하는 평가 문항의 유형에 따른 차이와 최근에 한층 더 강조되고 있는 수행평가 방법중의 하나인 면접법을 통한 변인확인능력 평가 결과간의 상관 관계를 알아보고자 하였다. 연구 결과에 제시한 바와 같이 선다형 지필 평가 문항 유형별 변인확인 능력은 대체로 높은 상관관계를 나타냈으나, 선다형에 의한 변인확인능력 평가 결과와 수행평가 방법에 의한 평가 결과는 매우 낮은 상관 관계를 나타냈다. 특히, 독립변인 확인 능력과 종속변인 확인 능력은 거의 상관 관계가 없는 것으로 나타나 두 능력 중 어느 한쪽의 인지 여부가 다른 한쪽의 인지 여부를 결정해 주지는 못하는 것으로 볼 수 있다. 이는 과학교육 활동에서 이 두 능력을 동시에 강조하는 과학과 교수 학습 전략의 적용이 필요함을 함의한다. 또한 선다형에 의한 평가 결과와 수행평가에 의한 평가 결과가 상이한 결과를 보이는 것으로 보아 선다형만을 이용한 과학 탐구능력 평가와 그에 관련된 연구보다는 수행평가 방법과 같은 과정 평가를 이용한 정성적 방법을 병행하는 것이 평가의 결과와 연구 결과의 해석에 대한 타당성을 한층 높여줄 것으로 해석된다.

• 한국노년학
• /
• 제38권1호
• /
• pp.1-14
• /
• 2018

노인성 난청은 일상생활 속 듣기 어려움(hearing handicap)을 유발함으로써 노년기 삶의 질을 저하시킨다. 본 연구에서는 초기 노인성 난청을 보이는 경도인지장애 노년층 40명과, 평균 연령 및 청력을 일치시킨 정상 노년층 40명을 대상으로 K-HHIE 설문을 실시하여 일상생활에서 느끼는 주관적 듣기 어려움 정도를 비교해보고자 하였다. 연구 결과, 첫째, K-HHIE의 사회적/상황적 점수, 정서적 점수, 그리고 총점에서 경도인지장애 노년층 집단이 정상 노년층 집단에 비해 유의하게 높은 점수를 나타내었다. 둘째, K-HHIE의 4개 요인 모두에서 경도인지장애 노년층 집단이 정상 노년층 집단에 비해 유의하게 높은 점수를 보였고, 특히 요인 1(대인관계 및 사회성)에서 집단 간 차이가 두드러졌다. 셋째, 집단에 따라 K-HHIE 문항별 평균 점수가 높은 상위 항목들을 비교한 결과, 경도인지장애 노년층과 정상 노년층 모두 8번 항목(작은 소리 듣기 어려움)과 15번 항목(TV 시청 불편함)에서 가장 많은 어려움을 호소하였으며, 특히, 경도인지장애 노년층은 요인 1에 해당하는 항목인 21번(식당에서 듣기 어려움)과 6번(모임 참석 시 듣기 어려움), 3번(대인기피), 20번(사회생활 제한) 항목들에서 높은 점수를 나타내었다. 본 연구는 초기 노인성 난청자 중에서도 인지장애가 있을수록 일상생활에서 더 많은 듣기 어려움을 호소하며, 특히 다화자 상황이나 배경 소음이 있는 상황에서의 듣기 어려움이 두드러지고, 이는 노년층의 사회활동을 제한시킬 뿐만 아니라 대인기피 등과 같은 정서적 문제를 야기할 수 있음을 확인하였다는 점에서 그 의의가 있다.

• 재활복지
• /
• 제18권4호
• /
• pp.315-330
• /
• 2014

본 연구는 뇌성마비 아동을 대상으로 감각프로파일(Sensory Profile)의 구성타당도를 검증하는데 목적이 있다. 만 3~10세 뇌성마비 아동 87명의 감각처리기능을 평가하기 위해 보호자를 대상으로 동의 후에 평가용지와 평가지침서를 우편 또는 방문을 통해 작성하도록 하여 자료를 수집하였다. 수집된 자료는 타당도를 검증하기 위해 Winstep 3.81을 통해 라쉬분석을 실시하여 항목과 대상자의 적합성, 항목의 난이도, 평정척도의 적합성, 대상자와 항목의 분리신뢰도를 분석하였다. 연구결과, 87명의 뇌성마비 아동 중에 4명의 아동이 부적합 대상자로 나타났다. 부적합한 대상자를 제외한 83명의 대상자로 항목의 적합도를 분석한 결과, 15개 항목이 부적합 판정을 받았다. 항목의 난이도에 대한 분석결과에서는 뇌성마비 아동의 감각처리능력에 비해 낮은 난이도의 평가항목들로 구성되어 있어 높은 평가항목이 필요한 것으로 나타났다. 감각프로파일의 평정척도 분석결과에서는 5점 척도보다는 3점 척도가 더 적합한 것으로 나타났다. 또한 3점 척도의 항목과 대상자에 대한 분리신뢰도는 0.90 이상 값으로 우수한 수준으로 분석되었다. 본 연구 결과를 토대로 난이도가 높은 새로운 평가항목의 개발과 3점 척도의 점수체계 변환으로 타당도가 검증된 감각프로파일의 임상적 적용이 필요할 것으로 생각된다.

• 한국유기농업학회지
• /
• 제26권4호
• /
• pp.759-774
• /
• 2018

본 연구는 동일한 평가점수 체계를 이용하여 HACCP 심사를 하고 있는 소 농장 HACCP 평가항목에 대한 문제점을 개선하기 위한 방안으로 최근 3년간 심사결과 지적비율 분석, 위해의 심각도 수준 분석 그리고 중요도 수준 분석 등을 평가항목별로 분석하여 이를 토대로 평가점수를 차등 부여하였다. 최근 3년간 지적사항 발생비율을 조사하여 평가항목별로 발생 비율을 조사하였다. 위해의 심각도 수준은 한국식품안전관리인증원의 심사관 자문을 통해 해당 평가항목이 가축(원유) 또는 인체에 미치는 영향이 안전성에 직접 관련 된 경우와 시정조치에 많은 시간이 걸리는 경우에는 '상(3점)', 해당 평가항목이 가축(원유) 및 인체에 미치는 영향이 안전성에 간접적으로 관련된 경우(위해정도가 상대적으로 낮은 경우)와 시정조치에 많이 시간이 걸리는 경우에는 '중(2점)', 해당 평가항목이 가축(원유) 및 인체에 미치는 영향이 안전성에 간접 관련된 경우와 즉시 시정이 가능한 경우에는 '하(1점)'으로 설정하였다. 지적사항 발생비율과 위해의 심각도 수준을 이용하여 포트폴리오 맵을 사용하여 선행요건 관리 분야에서 최종적으로 중요도가 높은(발생비율, 위해 심각도가 높은 영역에 포함된 평가항목) 항목으로 11개(19.0%,) 중요도가 중간(발생비율, 위해 심각도 중 한 곳만 높은 영역에 포함된 평가항목)인 항목은 18개(31.0%) 그리고 중요도가 낮은(발생비율, 위해 심각도 모두 낮은 영역에 포함된 평가항목) 평가항목 29개(50.0%)로 구성되었다. HACCP 관리 분야는 중요도가 높은 항목 4개, 중간항목 5개, 낮은 항목은 6개로 구성되었다. 배점기준은 중요도 높은 항목은 3점, 중간 항목은 2점, 낮은 항목을 1점으로 하였다. 본 연구를 통하여 개발된 평가항목별 배점기준과 현재 사용하고 있는 평가항목별 배점 기준을 소 농장에 적용하여 비교분석한 결과 그 차이점이 명확하게 나타나 심사의 객관성이 향상될 수 있을 것으로 판단된다. 아울러 HACCP 제도의 목적인 안전한 축산물의 생산과 소비자에게 안전한 축산물 공급에도 부합할 수 있을 것으로 판단된다.

• 한국농촌건축학회논문집
• /
• 제21권3호
• /
• pp.69-75
• /
• 2019

The purpose of this study is to provide the conservation management direction about cultural landscape of the traditional villages in the area of Huizhou through the importance-performance analysis. The results of the survey on the importance - performance of 261 people who had many visits to various cultural landscapes of Huizhou villages such as Hongchun, Sidichun etc. are as follows. It was appeared that the item of 'good air' is the highest level of importance and satisfaction and is best condition. The item of 'historical conservation' is the high level of importance, but the level of satisfaction is low, so continuous improvement is necessary. The item of 'Old garden conservation' has high satisfaction but low importance, so it needs to improve its importance through subsequent improvement. The item of 'Keeping of old cemetary and old tower' has low importance and satisfaction but it is above average, so continuous maintenance is needed. The items of 'Preservation of stone gate' and 'Preservation of famous man's birth house' all have slightly higher satisfaction and lower importance. Both items are highly satisfied with their importance, so they should avoid excessive efforts and maintain the present status. Satisfaction with the item of 'water environment and water quality' was the lowest, and the problem of the present condition is the most serious, and a major improvement is needed. The importance and satisfaction of 'Commercial development of old villages' was the lowest among all items. This item is causing serious problems and should provide an overall improvement way to drastically improve the importance and satisfaction. Concentration is necessary to improve the environment of the whole villages, to protect the ecological plants and animals in old villages, to transfer and improve the culture of old villages, to maintain sustainability of the villages, and to protect old temple and old rock in old villages. As the level of satisfaction with sustainability is the lowest in the part of 'Concentrate here', there is a great concern about sustainability. Therefore, it is necessary to focus on sustainability and concentrate on sustainable development.

• 과학교육연구지
• /
• 제47권2호
• /
• pp.211-224
• /
• 2023

본 연구의 목적은 예시 자료를 활용하여 자동문항생성을 기반으로 생성된 평가도구의 신뢰도를 산출하는 방안을 제시하는 데 있다. 이를 위해 학생들마다 다른 문항에 응답하는 설계와 평가 점수에 다중 오차요인을 반영할 수 있는 다변량일반화가능도이론을 예시 자료에 적용하여 분석하였다. G-연구분석 결과, 대부분의 설계에서 잔차 효과 다음으로 고전검사이론의 진점수에 해당하는 학생 효과가 크게 나타났다. 또한 문항 내용 영역을 고정한 설계에서 학생들의 상대적 순위는 문항 유형이나 문항에 따라 변하지 않았으며, 문항 유형을 고정한 설계에서 내용 영역에 따라 난이도는 거의 변화가 없는 것으로 나타났다. D-연구 분석 결과, 원자료는 적정수준 이상의 신뢰도를 확보하였으며, 수와 연산, 기하, 확률 및 통계 영역의 문항 수를 줄이거나 문자와 식과 함수 영역의 가중치를 높게 반영함으로써 원자료보다 높은 신뢰도를 산출할 수 있는 것으로 나타났다. 본 연구에서 제시한 효율적인 측정 조건은 예시 평가 자료에 제한되지만 본 연구에서 활용한 방법은 자동문항생성 기반의 다양한 평가 상황에서 측정학적 특성을 바탕으로 신뢰도를 산출하고, 효율적인 측정 조건을 탐색하는 데 적용 가능하다.

• 핵의학기술
• /
• 제27권1호
• /
• pp.55-61
• /
• 2023

Purpose In this study, the monthly population distribution was calculated for statistical verification of 10 tests (CA19-9, CA15-3, testosterone, PTH, calcitonin, AFP, CEA, CA72-4, PSA, estradiol) with changed reagents, and the trend of change By comparing and analyzing the results, we want to verify the accuracy of the results and improve the reliability of the test. Materials and Methods From June 2021 to February 2023, for the 10 items in which the reagent was changed, the monthly percentage and standard deviation index before and after the reagent change were compared, respectively. At this time, the reference value was arbitrarily set for the comparison group in consideration of the reference value of the test item, and the groups were subdivided and compared, and the standard deviation index allowed range was -2.0 or more and 2.0 or less. Results For CA19-9, CA15-3, AFP, CEA, and calcitonin 5 test items, the change in monthly ratio in all test sections before and after the reagent change was kept constant. On the other hand, for CA72-4, PSA, testosterone, PTH, and estradiol items, the standard deviation index exceeded the acceptable standard after changing the reagent. CA72-4 test items showed an increasing trend in standard deviation index in the test section exceeding the reference value. In the case of the PSA test item, the maintenance ratio of 0.04 ng/mL was significantly decreased after changing the reagent. The testosterone test item had a standard deviation index of -2.5 in the test section exceeding 10.1 ng/mL after changing the reagent, and the standard deviation index of the PTH test item was out of the acceptable range in all test sections. It was confirmed that the estradiol test item showed an overall increase in the result value. Conclusion Through this study, the continuity and accuracy of the test results could be verified. It is considered that the stability of the test can be secured by analyzing the factors affecting the test result and solving the cause for the test item whose standard deviation index is out of the acceptable standard.

• Educational Technology International
• /
• 제6권2호
• /
• pp.23-41
• /
• 2005

One of the main factors that determine the quality of instruction is the teaching ability of the instructor administering the class. To evaluate teaching ability, methods such as peer review, student feedback, and teaching portfolio can be used. Among these, because feedback from the students is directly associated with how well the students feel they have learned, it is essential to improving instruction and teaching ability. The principal aim of instruction evaluation lies in the evaluation of instructor's qualification and the improvement of instruction quality by enhancing professionalism. However, the mandatory instruction evaluations currently being carried out at the term's end in universities today have limitations in improving instruction in terms of its evaluation items and times. To improve the quality of instruction and raise teaching abilities, instruction evaluations should not stop at simply being carried out but also be utilized as useful data for students and teachers. In other words, they need to be used to develop teaching and improve instruction for teachers, and consequently, should also exert a positive influence on students' scholastic achievements and learning ability. The most important thing in evaluation is the acquisition of accurate information and how to utilize it to improve instruction. The online instruction diagnosis item pool is a more realistic feedback device developed to improve instruction quality. The instruction diagnosis item pool is a cafeteria-like collection of hundreds of feedback questions provided to enable instructors to diagnose their instruction through self-diagnosis or students' feedback, and the instructors can directly select the questions that are appropriate to the special characteristics of their instruction voluntarily make use of them whenever they are needed. The current study, in order to find out if the online instruction diagnosis item pool is truly useful in reforming and improving instruction, conducted pre and post tests using 256 undergraduate students from Y university as subjects, and studied the effects of student feedback on instructions. Results showed that the implementation of instruction diagnosis improved students' responsibility regarding their classes, and students had positive opinions regarding the usefulness of online instruction diagnosis item pool in instruction evaluation. Also, after instruction diagnosis, analyzing the results through consultations with education development specialists, and then establishing and carrying out instruction reforms were shown to be more effective. In order to utilize the instruction diagnostic system more effectively, from planning the execution of instruction diagnosis to analyzing the results, consulting, and deciding how those results could be utilized to instruction, a systematic strategy is needed. In addition, professors and students need to develop a more active sense of ownership in order to elevate the level of their instruction.

• 한국과학교육학회지
• /
• 제28권1호
• /
• pp.32-46
• /
• 2008

이 연구에서는 과학 영재 선발 도구로 사용된 지필검사(기초 지식 및 탐구 능력 검사, 창의성 검사) 문항의 질적 특성과 양적 특성을 살펴봄으로써 타당하고 신뢰로운 영재 선발 도구로서 지필검사의 적합성을 탐색하는데 필요한 기초자료를 얻고자 하였다. 문항의 질적 특성을 분석하기 위해 내적 및 외적 문항 분석틀을 구안하여 적용하였으며, 문항의 양적 특성과 질적 특성의 연관성을 분석하였다. 연구 결과, 다수의 문항이 중학교 교육 과정을 벗어난 속진 맥락으로 출제되어 내용 타당도에 문제가 있는 것으로 분석되었다. 또한 출제되는 내용이나 맥락에서 교과별 및 연도별로 상당한 차이가 있어 검사 도구의 안정성에도 문제가 있는 것으로 나타났다. 기초 지식 및 탐구 능력 검사의 경우는 지식이 차지하는 비율이 가장 높으며, 탐구 과정 중에서는 자료 해석 및 분석에 치중됨으로써 고른 탐구 능력을 측정하고 있지 못한 것으로 드러났다. 창의성 검사에서는 대다수의 문항이 발산적 사고나 연관적 사고보다는 수렴적 사고를 주로 측정하고 있는 것으로 나타났다. 한편, 분석된 대부분의 문항이 그래프보다는 그림이나 표를 이용하여 표현되는 것으로 나타났으며, 문항 유형에서는 서술형보다는 선다형이나 단답형의 비율이 훨씬 높았다. 문항의 변별도는 두 검사 모두 양호하였으나, 문항별 난이도 편차는 매우 큰 것으로 나타났다. 교과 간 및 검사도구 간 상관은 매우 낮았으며, 신뢰도 또한 낮은 것으로 나타났다. 또한 난이도는 낮아 쉬운 문제였지만 변별도가 양호한 유형의 문항이 가장 많았으며, 속진 맥락의 문항이 심화 맥락에 비해 변별도가 더 양호한 것으로 나타났다. 이와 같은 분석 결과들은 영재 교육 기관에서 학생 선발에 적합한 지필 검사 도구를 개발하는 데 기초 자료로 활용될 수 있을 것이다.

• 한국조리학회지
• /
• 제6권2호
• /
• pp.5-21
• /
• 2000

The purpose of this study looks for the directions to improve the performance evaluation of cook by examining the perceptions for performance of cook by supervisors in hotel restaurant. In order for this purpose, this study focuss on two areas: (1) the significant differences of each hotel type on the perceptions of each performance evaluation item, (2) the significant differences of each kitchen type on the perceptions of each performance evaluation item in terms of two different types of hotel. To examine (1) and (2), this study uses Student t test and anova analysis. The findings from this study have both theoretical and practical implications. Implications of these findings are discussed.