• 한국수학교육학회지시리즈E:수학교육논문집
• /
• 제26권3호
• /
• pp.273-299
• /
• 2012

최근 서술형 평가의 비중이 확대되고 있는 가운데, 본 연구에서는 선행 연구들을 바탕으로 경기도 창의 서술형 평가와 미국 오하이오 주 평가의 서술형 평가에서 제시한 서술형 평가의 정의, 문항 유형, 제공하는 정보, 채점 기준 및 그 활용 등에 초점을 두어 비교 분석함으로써 서술형 평가 체계에 대한 대안적 발전 방향을 모색하였다. 분석 결과, 서술형 평가의 정의와 측정하고자 하는 사고의 종류와 다양성뿐만 아니라, 두 평가가 제공하고 있는 평가관련 자료에 대한 접근 용이성 및 다양성, 교육당사자들에게 제공하는 자료의 구체성 및 실용성, 서술형 문항의 채점 방법과 기준, 그 활용에 있어서도 많은 차이점들이 발견되었다. 연구 결과를 종합하여 볼 때, 우리나라 현 서술형 평가 체제에서 학생들의 다양한 능력을 발휘하고 평가할 수 있는 문항 개발, 교육당사자들에게 명확하고 구체적인 정보 제공, 효율적인 서술형 평가 체제의 강화가 필요함을 알 수 있었다.

• 한국과학교육학회지
• /
• 제28권2호
• /
• pp.139-149
• /
• 2008

본 연구에서는 과학 영재 학생들의 과학적 문제발견 능력을 측정하기 위해 타당도와 신뢰도가 높은 검사 도구를 개발하였다. 먼저, 과학적 문제발견 능력에 대한 조작적 정의를 바탕으로 5개의 하위 평가 요소(적절성, 융통성, 독창성, 정교성, 가치 판단)를 선정하였으며 평가 기준을 구안하였다. 개발된 검사 도구는 내용 및 평가 기준에 대해 과학교육 전문가의 타당도 검증을 거친 후 과학 고등학교 학생들에게 투입되었으며, 채점 결과를 바탕으로 구인 타당도를 검증받았다. 또한 채점자간 신뢰도는 대체로 높게 나타났으며, 문항 난이도 와 변별도 역시 적절한 것으로 나타났다. 앞으로 과학적 문제발견 능력에 대한 합의된 정의를 도출해내어야 하며 평가의 객관성을 확보하기 위한 더 나은 방안을 강구해야 한다.

• 한국수학교육학회지시리즈C:초등수학교육
• /
• 제16권3호
• /
• pp.229-250
• /
• 2013

본 연구의 목적은 최근 영재 선발을 위해서 도입된 관찰 추천 선발제도에서 교사 관찰 추천서의 활용도를 높이기 위하여 현재 영재 선발전형의 일환으로 제출되는 교사 관찰 추천서를 분석하고 적절한 평가 모형을 개발하여 교사 관찰 추천서의 객관성 확보 방안을 마련하는 것이다. 연구 대상은 2012년 D광역시 소재 D대학부설 영재교육원 선발의 1차 전형에 통과한 초등수학영재 60명에 대한 교사 관찰 추천서이다. 연구 결과 교사 관찰 추천서에 나타난 수학 영재행동특성으로 구체적인 사례보다는 피상적인 진술을 하는 경향이 많았으며, 연구자가 고안한 교사 관찰 추천서의 분석 틀에 따라 빈도분석을 한 결과 특정 문항에 집중되는 경향을 보였다. 이는 관찰하고 서술하기 용이한 부분이 있는 반면 그렇지 못한 부분이 있거나 영재의 특성으로 판단하지 않았다는 것을 보여준다. 따라서 관찰 추천을 하기에 앞서 학생의 영재행동특성을 서술할 수 있는 좀 더 세분화된 교사 관찰 추천서 양식의 개발 및 영재의 관찰 추천과 관련된 교사연수가 체계적으로 이루어져야 한다는 것을 보여준다. 또한 교사 관찰 추천서에 나타난 영재행동특성에 대해서 Rubric 모형을 적용하여 점수화한 값을 기반으로 한 채점자간의 신뢰도는 1차 채점 시에는 상관계수가 .641이었고, 채점 과정에 대한 협의를 거친 후 3주 후에 실시한 2차 채점 시에는 .732로 다소 상승하였다. 이는 1차 채점 이후에 협의과정을 거치면서 채점자간의 엄격성을 조정하였으며, 서술형이기에 나타날 수 있는 다양한 상황에서의 세부적인 판단 기준을 세우고, 새롭게 나타난 상황에 대한 점수 부여의 합의점을 찾았기 때문이라고 볼 수 있다. 즉, 초등수학영재 판별을 위해서는 적절한 모형의 개발만큼이나 평가 모형에 대한 채점자들의 엄밀한 이해와 적용이 필요하다는 것을 시사한다.

• 한국가정과교육학회지
• /
• 제21권1호
• /
• pp.35-49
• /
• 2009

본 연구의 목적은 제7차 교육과정 중학교 3학년과 2007 개정 교육과정 중학교 주생활 관련 단원의 수행평가를 위해 학습자 참여 분석적 루브릭 개발 수업이 학습동기에 미치는 영향을 살펴보는데 있다. 루브릭 개발 수업은 개별 수행과제로 연구보고서법을 활용하여 '내가 살고 싶은 집'의 루브릭을 개발하는 것으로, 루브릭을 개발하는 과정은 정의, 개발, 평가 단계를 거쳐 이루어졌다. 루브릭 개발 수업이 학습동기에 미치는 영향을 살펴보기 위해 중학교 3학년 한 학급씩 실험집단과 통제집단으로 선정하여 독립변인은 루브릭 제시방식으로 종속변인은 학습동기로 하여 총 2차시에 걸쳐 실험이 이루어졌고 사잔 사후 동기검사를 실시하였다. '내가 살고 싶은 집'의 루브릭은 '주거공간의 기본 조건에 대한 개념의 정확성', '적용방법의 적합성', '보고서 제출 마감일 준수'의 3가지 평가항목에 따라 채점기준이 A, B, C 또는 A, B, C, D 척도로 채점기준을 기술하였다. 채점자 간 신뢰도는 모두 높게 나타났다. 루브릭의 개발수업이 학습동기에 미치는 영향을 살펴본 결과 주의집중과 관련성에는 영향을 주지 않았으나 자신감과 만족감에는 긍정적인 영향을 주었다. 개방형 질문의 내용분석 결과에서도 루브릭 개발 수업이 학생의 자신감과 만족감에 긍정적 영향을 미쳤다는 것을 알 수 있었다.

• 한국산학기술학회:학술대회논문집
• /
• 한국산학기술학회 2011년도 추계학술논문집 1부
• /
• pp.25-28
• /
• 2011

본 연구는 반도체 산업에서 반도체장비유지보수에 사용되어지는 반도체장비 유지보수 분야의 전문기술인력을 효과적으로 양성할 수 있는 반도체장비 유지보수의 자격종목을 개발하고자 하는데 그 목적이 있다. 연구의 목적을 달성하기 위하여 반도체장비 유지보수 분야의 국내외 실태 조사, 문헌조사를 통하여 반도체장비 유지보수 관련 교육훈련기관 및 검정 수요 예상 인력을 파악했으며, 유사자격제도(전자부품장착기능사, 전자부품장착산업기사, 생산자동화기능사, 생산자동화산업기사 등)를 분석하였고, 직무분석을 통하여 반도체장비유지보수기능사의 직무 및 교육내용을 분석하였다. 또한 반도체장비 유지보수 자격종목 신설에 대한 설문조사를 실시했으며, 반도체장비유지보수기능사 자격종목의 출제기준 및 채점 방법을 제시했고, 필기시험과 실기시험에 대한 모의 검정시험도 실시하였다. 이러한 결과를 토대로 반도체장비유지보수기능사에 대한 교육프로그램을 만들었으며, 자격검정을 실시할 수 있는 출제기준을 제시하였다.

• 한국가정과교육학회지
• /
• 제20권3호
• /
• pp.85-105
• /
• 2008

본 연구는 중학교 1, 2, 3학년 가정 교과에서 실험 실습법을 적용한 수행과제 평가도구로써 서술식 채점 기준표인 분석적 루브릭을 교사-학생간의 협상 과정을 통해 개발하는데 목적을 두었다. 본 연구에서는 다음과 같이 정의, 개발, 평가의 3단계 과정을 거쳐 분석적 루브릭을 총 3개, 1학년 [영양김밥 만들기] 2학년 [보조가방 만들기] 3학년 [미래의 나의 공간 꾸미기]를 개발하였다. 정의 단계에서는 루브릭을 개발할 수 있는 준비 단계로 루브릭을 적용할 수행과제를 설문지법을 통해 조사한 후 선정하였으며, 수행과제를 위한 방법 및 절차, 준비물, 유의사항 등을 구체적으로 제시하고, 루브릭 협상 학급 및 개발 일정을 선정 계획하였다. 그리고 Ainsworth와 Christinson(1998)이 제시한 교사-학생 협상 루브릭을 사용하였다. 개발 단계에서는 수행과제의 성취기준을 지식, 기능, 태도로 나누어 확인하고 평가하고자 하는 내용에 따라 채점 준거와 단계를 정하였다. 선정한 채점 준거의 평가기준을 참고로 A, B, C에 따라 구체적으로 관찰 가능하고 평가 가능한 행동으로 루브릭을 기술하도록 하였다. 그리고 모둠별로 작성된 루브릭을 교사-학생간의 협상 과정을 거쳐 1차 루브릭을 개발하였다. 평가 단계에서는 개발한 1차 루브릭의 초안을 가정과교육 전문가 1인에게 내용타당도에 대한 검토를 거쳐 수정 보완하여 최종 루브릭을 제시하였다. 최종 개발된 루브릭 평가 도구의 적합성을 평가하기 위하여 H대학의 교육대학원 학생을 대상으로 임의로 편의 표집하여 46부의 질문지를 분석 자료로 사용하였다. 현장 교사의 설문지 평가 결과 적합성 여부의 결과, 평가도구의 이해도, 타당도, 신뢰도, 활용의 용이성, 교사의 준비도, 결과의 활용도가 비교적 높아 적합한 것으로 판단되었다. 다만 활용의 용이성은 5점 척도에서 3점 이상이나 다른 것에 비해서 상대적으로 낮게 나타났다. 본 연구에서 개발한 루브릭의 활용을 위해 후속 연구를 위해서 다음의 몇 가지 제언을 하고자 한다. 첫째, 후속 연구로서 본 평가도구와 루브릭을 실제로 적용해 보고, 그 효과를 측정해 볼 필요가 있다. 둘째, 가정과에 루브릭에 대한 연구가 많지 않기 때문에 더 많은 영역에서 수행과제에 대한 루브릭이 개발되어 할 것이다. 셋째, 학생들이 루브릭에 대한 이해도가 낮고 학교 현장에서 학생들의 협의 협상하는 토론 능력이 많이 부족하기 때문에 루브릭 개념에 대한 명확한 이해를 도울 수 있도록 사전에 협상하고 토론하는 과정을 단계별로 구체화할 교수-학습 과정안과 보조 자료를 개발할 필요가 있다.

• 한국사회복지학
• /
• 제60권2호
• /
• pp.5-28
• /
• 2008

본 연구는 사회복지사들의 윤리적 민감성이 갖는 중요성에 대한 인식의 기반 위에서, 이를 측정하고 분석할 수 있는 검사도구를 개발하고 실제에 적용해 보기 위한 것이다. 기존의 윤리적 민감성 척도들과 관련 문헌들을 분석한 결과, 본 연구에서 개발하고자 하는 검사도구에 가장 적절한 방법으로 '비구조화된 상황판단형 지필검사방식 및 구조화된 채점방식'을 도출할 수 있었다. 이와 같은 방식의 척도를 개발하기 위하여 1단계 사례수집, 2단계 사례구성, 3단계 사례자문, 4단계 예비조사, 5단계 채점 지침작성, 6단계 최종사례 및 채점기준 확정 순으로 연구를 진행하였으며, 그 결과 세 가지 사례로 구성된 측정도구 SWEST를 개발하였다. 그리고 이 검사도구의 활용성을 보기 위하여 사회복지전공생과 사회복지실무자의 실제 응답내용을 분석하였으며 이러한 결과를 통해 SWEST가 사회복지사의 윤리적 민감성과 그에 관한 의미 있는 차이를 구분해 낼 수 있는 신뢰성과 타당성을 갖추었는지를 살펴보았다.

• 대한지리학회지
• /
• 제47권6호
• /
• pp.934-954
• /
• 2012

서답형 문항은 장소감, 도해력, 지리적 상상력 등 고차적 사고력을 추구하는 지리과의 주요 목표들에 대한 도달 여부를 측정하는 데에 매우 유용하다. 이 연구는 서답형 문항의 개념을 알아보고 지리과에서 적용 가능한 서답형 문항의 유형들을 구분하여 우리나라에서의 지리과 서답형 문항 개발을 위한 시사점을 도출하고 과제를 제안하고자 하였다. 연구자는 서답형 문항의 개념 정리에 이어서 미국에서 시행되고 있는 NAEP의 지리과 서답형 문항을 사례로 분석하여 유형화를 시도하였다. 서답형 문항은 문항 형식의 차원과 문항에서 평가하는 행동 영역의 차원에서 각각 분류할 수 있었다. 문항 형식의 차원에서는 문두 단독형과 자료 첨부형으로, 행동 영역의 차원에서는 지식 요구형, 이해 요구형, 적용 요구형으로 각각 구분하고 그 특징들을 분석하였다. 이를 통해 서답형 문항의 개발과 적용에 관련된 시사점 및 과제를 다음과 같이 제안하였다. 첫째, 내용 영역과 행동 영역에 정합하는 서답형 문항들을 개발해야 한다. 둘째, 학생들로 하여금 최대한 다양한 종류의 지리 자료들을 활용할 수 있도록 해야 한다. 셋째, 서답형 문항의 성패는 채점의 신뢰도와 밀접한 관련이 있으므로 채점의 단계 구분, 채점 기준, 의사 답안 등에 대한 후속적 연구가 요구된다.

• 한국학교수학회논문집
• /
• 제11권3호
• /
• pp.377-397
• /
• 2008

오늘날 학교수학에서는 학생들의 학습 결과만이 아닌 학습자 사고의 진 과정을 평가해야 한다는 방향으로 평가관이 변화되어 가고 있으며, 대안적인 평가방법으로 서술형 평가가 교육청의 권고 하에 학교현장에 급격히 도입되고 있는 실정이다. 그러나 서술형 평가의 잠재적 장점을 살리면서 현장에 안정적으로 적용되기 위해서는 성숙한 실행조건을 갖추는 것이 우선되어야 한다. 이에 본 연구에서는 현재 학교에서 시행되고 있는 수학과 서술형 평가의 효율적인 정착을 위해 서울 및 수도권 소재 중 고등학교 수학교사 120명을 대상으로 서술형 평가의 실시 현황, 문항 제작 및 채점, 기대 및 개선 방향에 대한 인식을 조사하여 그 시사점을 제안하고자 하였다. 연구 결과, 많은 학교가 서술형 평가를 학교에서 주관하는 정기 시험에서 실시하여 그 결과를 성적에 반영하고 있었다 서술형 평가는 학생들의 사고력 신장과 학업 성취도에 대한 보다 정확한 측정을 위하여 '중'이나 '중상' 정도 난이도로 출제되고 주로 분석적인 채점 방법으로 4회 이상 반복 채점하곤 있었다. 서술형 평가와 관련한 문제점으로는 학급 당 학생 수, 평가 과정에서의 객관성 확보, 문항 개발의 어려움과 더불어 학생들이 학습 부담의 증가 등이 꼽혔는데, 이에 대한 해결 방안으로 교사의 업무 경감, 서술형 평가를 위한 적극적인 문항 개발 및 보급, 서술형 평가를 위한 타당하고 객관적인 평가기준의 개발 및 보급이 시급하게 개선되어야 하는 것들로 나타났다.

• 공학교육연구
• /
• 제11권4호
• /
• pp.46-57
• /
• 2008

공학교육인증의 핵심은 "성과중심(outcomes based)" 교육을 바탕으로 지속적 자율 개선 구조를 통하여 졸업생의 능력 및 자질을 향상시키는 것이다. 공학교육 인증기준 중 학습성과의 경우 교육평가, 교육목표, 교육과정과의 관계 속에서 올바르게 이해될 필요가 있다. 본 논문에서는 프로그램 학습성과 평가방법을 중점적으로 다루었다. 먼저 프로그램 학습성과 평가방법의 일반적인 문제점을 개선할 수 있는 방안을 기술하였다. 또한 프로그램 학습성과 평가체계와 루브릭을 활용한 평가도구의 구체적 실행 방법을 논하였다. 따라서 본 연구를 통하여 수립된 평가도구를 통하여 대학현장에서 학습성과 평가가 실제적으로 운영될 수 있기를 기대한다.