원격교육 시대의 인공지능 활용 온라인 평가 (A Study on the Online Assessment using Artificial Intelligence for Distance Education)

서지정보

· 발행기관 : 학습자중심교과교육학회
· 수록지 정보 : 학습자중심교과교육연구 / 20권 / 14호 / 389 ~ 407페이지
· 저자명 : 이용상, 신동광

초록

본 연구에서는 원격교육 상황에서 평가 방안으로 인공지능 챗봇을 활용한 쓰기 평가 모델을 제안하고 영어과의 사례를 통해 그 가능성을 탐색하였다. 이를 위해 현재 상용 서비스를 제공하고 있는 대표적인 챗봇 가운데 하나인 미추쿠를 활용하였으며, 학생들은 미추쿠와의 대화를 통해 글을 쓰기 위한 자료를 얻고 이를 바탕으로 글쓰기를 완성하였다. 또한 인공지능을 활용한 온라인 평가 방식의 가능성을 탐색하기 위해 오프라인 평가의 점수와 온라인 평가의 점수를 비교·분석하였고 실험에 참여한 학생들을 대상으로 한 설문을 통해 챗봇 기반 온라인 평가의 유용성과 개선점에 대한 의견을 조사하였다. 미추쿠를 활용한 온라인 쓰기 평가에서 학생들은 기존의 오프라인 평가보다 통계적으로 유의한 수준에서 더 높은 점수를 받았으며, 이와 같은 결과는 이러한 온라인 쓰기 평가가 학생들의 변별보다는 학생들이 더 나은 글을 쓰는 본질적인 목표에 초점을 둘 수 있다는 점에서 의미가 있다. 설문 결과에서 학생들은 미추쿠와의 대화를 통한 영어 글쓰기가 영어 실력의 향상에 기여하고, 원격수업에서 흥미도와 참여도를 높일 수 있을 것으로 전망하였다. 오늘날과 같은 인포데믹 사회에서 영어 쓰기 역량은 정보처리능력까지도 포함하는 능력으로 재정의되고 있다. 이런 측면에서 본 연구에서 제안한 인공지능 챗봇을 활용한 영어 쓰기 평가는 이러한 영어 쓰기 역량을 보다 타당하게 평가할 수 있는 방안인 동시에 타 교과의 원격교육에서도 학생들의 능력을 공정하고 객관적으로 평가할 수 있는 대안으로 적용가능하리라 사료된다.

영어초록

In the present study, we proposed an online writing assessment model using an artificial intelligence chatbot in the distance education environment and explored its feasibility in English education. To this end, Mitsuku, one of the most advanced chatbots was adopted. The participants obtained cultural information through some chitchat with Mitsuku and referred to the information for writing their essay. In order to investigate the possibility of the chatbot-based online assessment for distance education, we compared the results of the traditional paper and pencil writing test and the chatbot-based online writing test. In addition, we also surveyed the students on the usefulness and improvement of the chatbot-based online test. The results show that the students gained significantly higher scores in the online test compared to those of the offline test. This is a critical finding, which means that the students could have a chance to improve their writing by chatting with Mitsuku. The survey results also show that the students believe chatting with Mitsuku would contribute to improving their English competence and increasing their interest and participation in distance education. In the current infodemic society, the competence of writing in English includes the information processing ability, and thus the English writing assessment using an AI chatbot proposed in this study would be an more appropriate way for assessing this kind of English competence. In conclusion, it was also suggested that the online assessment using AI could be applied to other subjects as well.

참고자료

· 없음