한국어 듣기 평가 문항의 선택지 제시 방법 연구 (A Study on the Presentation Modes of Answer Options in Korean Listening Questions)

서지정보

· 발행기관 : 민족어문학회
· 수록지 정보 : 어문논집 / 79호 / 205 ~ 229페이지
· 저자명 : 김지혜, 오선경

초록

본 연구는 한국어 듣기 평가의 선택지 제시 방법이 평가 결과에 미치는 영향을 살펴본 연구이다. 한국어능력시험(TOPIK)을 비롯한 대부분의 한국어 듣기 평가는 선택형 평가로 실시된다. 이는 평가의 실용성과 신뢰도를 확보하기 위함이다. 그러나 한국어로 쓰여 있는 사지선다형의 선택지는 듣기 능력보다는 읽기 능력이나 어휘 및 문법 능력에 더 집중할 우려가 있어 의사소통 능력으로서의 듣기 능력을 평가하는 데에는 한계가 있어 보인다. 듣기 평가에서 평가의 타당도를 높이기 위해서는 선택형 평가보다 수행 평가가 더 적절할 것이나 이는 시행 및 관리에 있어 어려움이 따른다. 이에 본고는 평가의 실용성과 신뢰도를 유지하면서 타당도를 제고하려면, 현재의 선택지 제시 방법을 비판적으로 검토하고 듣기 평가에 적합한 선택지 제시 방법을 제안하는 것이 필요하다고 보았다. 이를 위해 중급 수준의 한국어 학습자 30명을 대상으로 선택지가 문자와 음성, 모국어와 목표어로 서로 다르게 구성된 듣기 평가를 실시하여 평가 결과가 어떻게 달라졌는지를 살펴보았으며, 피험자들의 반응 분석 및 설문을 통해 듣기 평가의 선택지가 어떤 방향으로 개선되어야 하는지를 알아보았다. 실험 결과, 선택지의 제시 방법은 평가 결과에 유의미한 영향을 미쳤으며, 듣기 능력 중 평가하고자하는 세부 능력에 따라 문항 유형의 차별화와 함께 선택지의 제시 방법도 다양화되어야 함을 발견할 수 있었다.

영어초록

This study investigated the effects of different presentation modes of answer options in multiple-choice questions(MCQ) in Korean listening tests. In general, Korean listening proficiency tests, such as TOPIK, consist answer options with four Korean written choices for reliability and practicality. The thing to note is that written choices will require reading ability besides listening comprehension and it causes the lack of construct validity. This study tried to show the other presentation modes, such as oral choices and test-takers’ native language choices and compare the effects of them. Through the listening test and open-ended survey, the researchers investigated how the presentation modes of answer options affect the listening score and difficulty of the test. Thirty students in intermediate proficiency level participated in this study and all the test-takers shared the same first language, Chinese. The answer options of MCQ in Korean listening test were presented in three different modes, Korean Written Choices(KWC), Chinese Written Choices(CWC), Korean Oral Choices(KOC). As a result, the modes of answer options were turned out to affect the test result. The difficulty of the test was the lowest in CWC, while it was the highest in KOC. Oral choices are not familiar to the test-takes and it may introduce memory effects. The result also showed the correct rate in three modes varies with the types of question. The correct rate is very high in CWC in finding detailed information question, meanwhile some test-takersmentioned the listening-and-finding-response questions were easier in KOC. The results from this study can be used to diversify the presentation modes of answer options depending on test-takers’ variance and the types of question. Eventually it will contribute to raising the test validity.

참고자료

· 없음