한국어 쓰기 자동 채점 시스템 개발을 위한 기초 연구 :국내외 쓰기 자동 채점 시스템 검토를 중심으로 (A Preliminary Study on the Development of a Korean Automated Essay Scoring System)

서지정보

· 발행기관 : 고려대학교 국제한국언어문화연구소
· 수록지 정보 : Journal of korean Culture / 66권 / 7 ~ 47페이지
· 저자명 : 김형민, 이선영, 오재혁, 이정란, 이향원, 최은지

초록

쓰기 자동 채점은 학습자가 작성한 텍스트를 분석하여 자동으로 점수를 부여하는 기술이다. 한국어 쓰기 평가에서 자동 채점 기술에 대한 연구는 2020년대에 시작되었으나 아직 초기 단계에 머물러 있다. 이 연구는 한국어 쓰기 자동 채점 시스템 개발을 위한 기초 연구이다. 개발을 위해 가장 먼저 해야 할 일은 앞선 사례를 검토하고 분석하는 과정일 것이다. 이에 이 연구에서는 국외 언어 평가에서 상용화된 쓰기 자동 채점 시스템(C-rater, E-rater, IntelliMetric, IEA, PEG, BETSY)의 특징을 분석하고 국내 교과교육의 서답형 문항 자동 채점 시스템 개발 연구를 검토하였다. 이를 바탕으로 한국어 쓰기 자동 채점 시스템 개발에서 고려해야 할 내용을 다음과 같이 제안하였다. 첫째, 자동 채점에서 기계와 인간이 담당할 영역과 범위에 대한 계획이 마련되어야 한다. 둘째, 한국어 쓰기 특성을 반영한 채점 자질의 표준화가 필요하다. 셋째, 한국어 학습자의 언어를 효과적으로 처리할 수 있는 기술이 요구된다. 넷째, 대규모 숙달도 평가는 물론 형성 평가 및 자가 학습 등 교육 현장에서의 교사와 학습자가 실제적으로 활용할 수 있는 자동 채점 시스템이 개발되어야 한다. 마지막으로 답안의 언어 단위를 고려한 자동 채점 시스템을 개발해야 한다.

영어초록

Automated Essay Scoring System(AES) is a technology that analyzes texts written by learners and automatically assigns scores. Research on automated scoring technology for Korean writing began in the 2020s, but it remains in its early stages. This study serves as foundational research for the development of an Automated Essay Scoring System for Korean writing. The initial step in the development process is to review and analyze previous cases. Accordingly, this study analyzes the characteristics of commercially available Automated Essay Scoring Systems used in international language assessments (C-rater, E-rater, IntelliMetric, IEA, PEG, BETSY) and reviews domestic research on the development of automated scoring systems for constructed-response items in educational contexts. Based on this analysis, the study proposes the following considerations for developing an Automated Essay Scoring System for Korean writing. First, a plan must be established to delineate the areas and scope managed by machines and humans in automated scoring. Second, it is necessary to standardize the scoring features that reflect the characteristics of Korean writing. Third, technologies that can effectively process the language of Korean learners are required. Fourth, an automated scoring system should be developed that can be practically used by teachers and learners in educational settings, not only for large-scale proficiency assessments but also for formative assessments and self-directed learning. Finally, a scoring system that considers the linguistic units of the responses needs to be developed.

참고자료

· 없음