한국어 숙달도 평가 도구로서 유럽공통참조기준 자가진단표의 타당도 검증 및 활용 방안 (Validation of CEFR Can-Do Statements as a Self-assessment Instrument of Korean Proficiency)

서지정보

· 발행기관 : 이중언어학회
· 수록지 정보 : 이중언어학 / 82호 / 161 ~ 192페이지
· 저자명 : 최재수

초록

본 연구는 구성 및 내용 타당도와 문항난이도 및 차별도를 중심으로 중급 및 고급 한국어 학습자의 목표 언어 숙달도를 측정할 수 있는 자가평가 도구의 타당도를 검증하였다. 본 연구에서는 중급 및 고급 학습자의 숙달도를 가늠하기 위해 유럽공통참조기준(CEFR, Council of Europe, 2001)의 B1, B2, C1 레벨의 자가평가표를 참고하여 읽기/듣기/말하기/쓰기로 대표되는 언어기술영역을 모두 포괄하는 24개의 6점 리커트 척도 문항을 구성하였으며, 이를 바탕으로 서울 소재 4년제 대학교에서 학부에 재학 중인 217명의 중국인 유학생들을 대상으로 중국어로 번역된 설문지를 배포하였다. 이를 통해 축적된 데이터는 개별문항과 해당 언어기술 간의 수렴타당도 그리고 해당 언어기술 간의 구조 및 변별 타당도를 확인하기 위해 구조방정식을 활용한 확인적 요인분석을 거쳤으며, 개별 문항의 난이도 및 변별도를 검증하기 위해 일반화부분점수모형을 기반으로 한 문항반응이론 분석을 거쳤다. 분석에 사용된 통계 프로그램은 각각 AMOS 20과 R package 3.4.3이었다. 확인적 요인분석 과정을 통해 이해능력(읽기와 듣기) 및 산출능력(쓰기와 말하기) 두 가지 구인이 변별력 있게 구성되었다. 적절한 난이도와 변별도를 보이지 않은 소수의 문항을 분석한 결과, 설문응답자들은 이들 문항에 대체로 보수적으로 답변을 하는 경향을 보였다. 이는 하나의 문항에 지나치게 다양한 의사소통 환경이 포함되어 있다는 점, 그리고 설문응답자가 확신을 가지고 답변하기 힘든 낯선 경험을 묻고 있다는 점에서 기인하는 것으로 보인다. 본 연구는 유럽공통참조기준에서 추출된 자가평가 도구가 중/고급 한국어 학습자의 숙달도를 타당하게 측정 및 변별하고 있음을 입증하였다. 본 검사 도구는 북미 지역 한국어 프로그램에서의 반 배치 의사결정에 보조자료로써 활용될 수 있으며, 국내 한국어 교육의 맥락에서는 학습자의 목표 언어 습득 및 발달과정을 장기적인 관점에서 추적할 수 있는 손쉬운 도구로 기능할 수 가능성을 내포하고 있다.

영어초록

This study demonstrates empirical evidence of the self-assessment battery designed to distinguish between intermediate and advanced learners of Korean with a focus on structural, content, and construct aspect of validity. All 24 statements were selected from the CEFR self-assessment grid and converted into 6-point Likert scale items and administered to 217 university-level Chinese students (Council of Europe, 2001). The item responses were analyzed by the AMOS version 20.0 and the R package version 3.4.3, using a structural equation modeling (SEM) and a generalized partial credit model (GPCM). The confirmatory factor analysis showed that the selected 24 statements constructed four factors (i.e., RC, LC, SP, and WR) and grouped into two meta-criteria (i.e., understanding vs. production skills) which are structurally aligned with the CEFR skill description. The Logit scale of item difficulty indexes showed that the items are sensitive and systematically distributed in relation to the expected difficulty range. The discrimination indexes revealed that only one item showed a low discrimination index below threshold, suggesting that the quality of items is generally acceptable

참고자료

· 없음