객체 인식과 VR을 활용한 유아용 단어 학습 시스템 (Infant Learning System for Word by Using Object Recognition and VR)

서지정보

· 발행기관 : 한국컴퓨터교육학회
· 수록지 정보 : 컴퓨터교육학회 논문지 / 24권 / 5호 / 47 ~ 54페이지
· 저자명 : 노민경, 신다은, 이민송, 임희주, 정승도

초록

기존의 유아용 단어 학습 시스템에서는 대부분 고정적인 그림 등을 통해 단어를 학습하는 구조를 가지고 있다. 본 논문에서는 사용자가 직접 카메라를 이용하여 주변의 보이는 무한한 사물을 촬영하고 사물과 단어를 연계하여 학습할 수 있도록 하고자 한다. 이를 구현하기 위해 주변에서 쉽게 볼 수 있는 여러 사물을 딥러닝 기술을 이용하여 학습하고 실시간으로 인식할 수 있도록 하였다. 모든 사물이 주위에 존재하지 않고 또한 접근하기 어려운 동물과 같은 경우에 대한 단어 학습을 위해서는 AR 기술을 이용하여 3D 콘텐츠를 제공할 수 있도록 구현하였다. 전체 시스템 구성은 안드로이드 앱으로 구성하고 학습모드와 게임모드를 구분하여 구현하였다. 학습모드에서는 객체 인식 기술, TTS/STT 기술, AR 기술을 활용하여 사물과 연계되는 단어 학습이 가능하도록 하였다. 학습모드에는 읽기, 말하기, 쓰기 능력을 균형있게 향상시킬 수 있도록 각각의 기능을 적절히 배치하였다. 게임 모드에서는 게임 방식을 통해 흥미를 유발하고 기존에 습득한 단어에 대한 복습이 자연스럽게 이루어지도록 하였다. 이러한 놀이를 접목한 교육은 아이들이 공부에 흥미를 가질 수 있게 하여 자기 주도적인 학습 능력을 향상시키면서 자연스럽게 단어 학습의 효과를 높일 것으로 기대한다.

영어초록

The traditional word learning system for infant has a structure in which words are learned through a fixed picture or the like. In this paper, the user can directly use the camera to take pictures of infinite objects that can be seen around them, and to learn by linking objects and words. To implement this, various objects that can be easily seen around can be learned using deep learning technology and recognized in real time. It was implemented to provide 3D content using AR technology for word learning for cases such as animals that do not exist around and are difficult to access. The entire system configuration is composed of an Android app, and the learning mode and the game mode are separated and implemented. In the learning mode, object recognition technology, TTS/STT technology, and AR technology were used to enable learning of words related to objects. In the learning mode, each function is appropriately arranged so that reading, speaking, and writing skills can be improved in a balanced way. In the game mode, interest was aroused through the game method, and the previously learned words were reviewed naturally. Education that incorporates such play is expected to increase the effect of learning words naturally while improving self-directed learning ability by enabling children to be interested in study.

참고자료

· 없음