[음성처리신호] 멀티모달 음성인식기술 및 국내외현황

목차

첫번째 테마 : 사용자 인터페이스는 이제 멀티모달 시대로
1. 멀티모달 인터랙션 프레임워크
2. EMMA
3. 잉크 마크업 언어
4. 멀티모달 서비스 동향
4.1 텔레매틱 서비스
4.2 멀티모달 다이얼 서비스
4.3 멀티모달 휴대 단말 서비스

두 번째 테마 : Multi-Modal Human Interface using Brain Technology on Communication System
제 1 장 서 론
제 2 장 멀티모달 데이터베이스 구축 및 음성신호처리
제 3 장 영상 신호 체제
제 4 장 이중모달 융합기 개발 리 및 음성/영상 동기화
제 5 장 뇌파 변수와 인터페이스 개발
제 6 장 결론

본문내용

사용자 인터페이스에 대한 연구는 컴퓨터 및 기계가 발명이 되었을 때부터 진행되어 왔다. 키보드 개념은 타이프라이터에서 따왔으며 핸드폰, PDA와 같은 지능형 단말기가 출현하면서 새로운 인터페이스에 대한 연구가 본격적으로 진행되고 있다. 대표적인 연구가 멀티모달 인터페이스에 대한 연구이다.
멀티모달 인터페이스란 인간과 기계의 통신을 위하여 음성, 키보드, 펜을 이용하여 인터페이스를 하는 방법을 말한다. 일반적으로 기계로의 입력을 위해서는 음성명령, 펜, 글씨 및 키보드 타이핑을 사용하고 기계의 결과를 출력하기 위해서는 음성, 오디오, 비디오를 사용한다. 인간과 인간 사이의 통신은 음성과 제스처를 이용하지만 기계에서는 전통적으로 키보드를 사용하여 왔다. 최근에 음성처리 기술이 발전하고 단말기의 성능이 개선되어 초소형 단말기가 출현하게 되자 음성과 펜을 이용하는 멀티모달 인터페이스가 필요하게 되었다. 멀티모달 인터페이스는 음성 입, 출력을 처리하는 음성 인터페이스와 펜 필기체를 인식하는 잉크 인터페이스 및 전통적으로 사용해 온 키보드 인터페이스로 나누어진다. 음성 인터페이스는 음성으로 기계를 명령하는 음성입력 기능과 기계의 출력을 음성으로 들려주게 하는 음성출력 기능으로 나눌 수 있다. 음성입력 기능은 음성인식 기술에 의해 실현되면 음성출력 기능은 음성합성 기술에 의해 구현되므로 음성 인터페이스 기술이란 음성 인식, 음성합성 기술이라고 할 수 있다. 잉크 인터페이스란 펜으로 글을 쓰거나, 그림으로 표시한 것, 혹은 수식을 사용하여 인터페이스 하는 방식이다. 사람과 기계의 통신 수단은 아직까지 키보드, 혹은 버튼이 가장 많이 사용되고 있다. 최근에는 단말기가 소형화, 지능화되어, 사용자가 보다 편리하고 쉽게 사용할 수 있는 입력 방법에 대한 연구가 진행됨에 따라 멀티모달 인터페이스에 대한 관심이 높아지고 있다.

참고 자료

1. 전자정보신문 주간279호 2004년 9월, KT 서비스개발 연구소 음성언어연구팀 자료“사용자 인터페이스는 이제 멀티모달 서비스로”
2. 정보통신부 연구보고서, 한국전자통신연구원 2003년 5월“유무선환경하의 뇌공학을 이용한 멀티모드 휴먼인터페이스 개발 보고서"