• 한국과학교육학회지
• /
• 제43권1호
• /
• pp.17-28
• /
• 2023

디지털 기반 지능 정보 사회로의 진입에 발맞추어 과학 교육과정에서는 과학과의 교과역량 함양을 강조하고 있으며, 역량 평가의 측면에서 컴퓨터 기반 평가가 관심을 받고 있다. 컴퓨터 기반 평가는 높은 실제성을 갖는 형태로 문항을 구현할 수 있고, 평가 결과를 데이터베이스로 축적하여 환류 체계를 구축함에 있어서도 이점이 있다. 다만, 평가 타당도 개선, 측정 효율성 저하, 관리 요소 증가 등의 문제를 해결할 필요가 있다. 본 연구에서는 학업성취도 평가가 지필평가에서 컴퓨터 기반 평가로 전환되는 과정에서 새로운 평가의 도입에 따른 학생들의 반응을 살펴보기 위해 2021년도에 시행된 학업성취도 평가의 지필평가와 컴퓨터 기반 평가의 병행시행 결과를 분석하였다. 특히, 동일한 문항을 평가 매체만을 변화시켰을 때 학생들의 성취에 미치는 영향, 컴퓨터 기반 평가의 장점을 살린 새로운 기능을 포함하여 문항을 구성했을 때의 변화가 학생들의 성취에 미치는 영향을 살펴보았다. 중학교 3학년 학생 7,137명이 지필평가와 2종의 컴퓨터 기반 평가 중 하나에 응시한 결과를 분석하였다. 평가 시행 후 집단별로 문항의 정답률과 변별도 평균을 산출하였으며, 학업성취도 출제 경험이 있는 과학교사 8명이 참여한 전문가 협의회를 통해 응답 특성에 대한 전문가 의견을 수렴하였다. 결과에 따르면 지필평가와 단순 모드 전환형 평가에서의 학생들의 성취 결과는 큰 차이는 없어 매체 효과가 거의 나타나지 않았다. 다만, 서답형 문항의 정답률이 컴퓨터 기반 평가에서 다소 높게 나타났음을 확인하였고, 이는 응답의 편이성과 관련되는 것으로 분석하였다. 한편, 컴퓨터 기반 평가 도입에 따라 새로운 기능들이 적용된 문항들에서 유사한 문항의 정답률과 차이가 10%p 이상인 문항들이 존재하였다. 학생들의 답지 반응을 분석한 바에 따르면, 이는 새로운 기능을 통해 마련한 혁신적인 문항들이 학생들의 이해 수준을 보다 세밀하게 파악한 결과로 볼 수 있었다. 결과를 토대로 컴퓨터 기반 평가를 도입하고 개발할 때 유의할 사항을 논의하고 시사점을 제시하였다.

• 지능정보연구
• /
• 제23권4호
• /
• pp.169-196
• /
• 2017

제4차 산업혁명의 도래로 IT(information technology)를 활용한 다양한 융합기술에 대한 관심이 높아지고 있으며, 이에 따른 고품질의 IT관련 교육서비스 제공의 필요성 및 중요성 또한 점차 증대되고 있다. 한편, 일반적인 교육서비스 품질 및 만족도에 관한 연구는 그 동안 다양한 맥락에서 활발히 진행된 바 있으나, IT교육 참가자를 대상으로 한 IT교육 서비스품질의 역할을 살펴본 연구는 상대적으로 부족한 것으로 파악된다. 이에 본 연구에서는 SERVPERF 모형 및 관련 선행연구를 바탕으로 IT교육 맥락에서 IT교육 서비스품질의 다섯 가지 차원(유형성, 신뢰성, 반응성, 확신성 및 공감성)을 도출하고, 이러한 세부 IT교육 서비스품질 요인이 학습자의 교육만족도, 나아가 현업적용의도 및 추천의도에 미치는 영향을 검증하였다. 또한, 이러한 영향이 학습자 직위(실무자 집단/관리자 집단) 및 참여동기(자발적 참여집단/비자발적 참여집단)에 따라 어떻게 달라지는지에 대한 추가분석도 실시하였다. 서울 소재 'M'교육기관 203명의 IT교육 참가자 대상 설문을 활용한 구조방정식모형 분석 결과, IT교육 서비스품질의 다섯 가지 차원 가운데 유형성, 신뢰성 및 확신성이 교육만족도에 유의한 영향을 주는 것으로 나타났으며, 이러한 교육만족도는 현업적용의도와 추천의도에도 유의한 영향을 주는 것으로 조사되었다. 또한, IT교육 서비스품질이 교육만족도에 미치는 영향 관계에서 학습자 직위 및 참여동기가 유의한 조절효과를 가진다는 사실을 확인하였다. 본 연구는 SERVPERF 모형을 활용하여 IT교육 맥락에서 IT교육 서비스품질의 영향력을 실증한 최초의 연구라는 점에서 학술적 의의가 있다. 본 연구결과가 IT교육 서비스 제공기관의 교육만족도 제고 및 효율적인 서비스 운영을 위한 실질적인 지침을 제공해 줄 수 있을 것으로 기대한다.

• 지능정보연구
• /
• 제28권1호
• /
• pp.45-68
• /
• 2022

대한민국 중앙부처, 지방자치단체는 코로나 19가 급속도로 확산하는 팬데믹 상황에서 재난상황 극복을 위해 재난대응에 필요한 정보를 재난문자를 통해 제공하였다. 재난문자는 국민들이 가장 많이 접하는 재난정보 전달수단으로서, 휴대폰에 직접 방송하는 CBS(Cell Broadcast Service) 방식을 채택하고 있어 직접 찾아보는 수고스러움 없이 휴대폰을 통해 쉽게 정보를 접할 수 있다는 장점이 있다. 본 연구는 지난 1년 1개월간(2020년 1월~2021년 1월) 서울특별시에 발송된 재난문자의 특성을 다양한 텍스트마이닝 방법론 등을 통해 도출하고 재난문자에 포함된 다양한 유형의 정보가 국민들의 이동 행태에 어떠한 영향을 미쳤는지를 서울특별시 지역구의 연령별 유동인구의 이동성을 통해 확인하였다. 각 문자에 포함된 주요 단어와 포함된 정보를 분류하는 과정을 거치고 포함된 단어를 기반으로 하는 문서 군집 분석 기법을 적용해 개별 발송 문자를 분석 단위로써 활용할 수 있도록 텍스트 분석을 시행하였다. 이후, 텍스트마이닝을 통해 추출한 재난문자의 특성이 지역별, 연령별 인구이동성에 미친 영향을 규명하였다. 구조화된 모형을 활용하여 재난정보가 인구이동성에 미치는 영향을 기본효과, 누적효과로 구분하여 측정하였다. 지자체가 보유한 재난문자 발송권한으로 인해 재난문자 발송 특성은 지자체별로 상이함을 계량 분석에 활용하였다. 분석 결과 인구이동성에 변화를 유발하는 정보유형은 연령별로 상이함을 확인할 수 있었다. 날짜와 순서에 관련된 정보는 60-70대의 인구이동성을 유의미하게 감소시키는 것을 확인할 수 있었다. 온라인 정보는 20대의 이동성을 감소시켰고, 증상과 관련된 정보는 30대의 인구이동성을 감소시켰다. 한편, 방역 정책 준수를 당부하는 의미를 포함하는 규범적 단어 등은 전 연령의 인구이동성에 유의미한 변화를 불러일으키지 못함을 확인할 수 있었다. 이는 재난대응에 도움이 되는 유의미한 정보들만 재난문자에 포함되어야 함을 의미한다. 한편, 인구이동성에 유의미한 변화를 불러일으키는 정보유형 또한 재난문자가 반복됨에 따라 효과가 상쇄함을 음의 누적효과 추정 결과를 통해 확인할 수 있었다.