음성/제스처 융합 인식 시스템의 구현

음성인식률을 떨어뜨리는 가장 큰 원인은 노이즈이다. 따라서 신호상의 노이즈를 제거하기 위해 많은 연구들이 행해져왔다. 본 논문은 음성인식의 성능을 높이기 위해 언간의 정보처리 방법과 유사한 방법인 영상 정보를 음성정보와 융합함으로써 노이즈 환경에서 보다 높은 성능을 갖는 명령어 인식 시스템을 개발한다. 제안된 시스템은 음성특정추출 모듈과 제스처특정추출 모듈, 동기화 모듈 그리고 융합인식모듈로 구성되어 진다. 실험결과 용합인식기가 SNR 7dB 이하에서 음성 인식률보다 높은 성능을 보인다.