본 과제는 멀티모달 생체신호와 음성을 함께 활용하여, 말이 어려운 사람도 생체신호만으로 음성을 인식·합성할 수 있는 SSI(Silent speech interface) 기술을 개발하는 연구임.
연구 목표는 생체신호에 최적화된 메타 학습 기술과 개인화된 음성 합성 기술 확보에 있음. 핵심 내용은 Metric 방식 메타학습, 한국어·영어 멀티모달 데이터베이스 구축, 음성장애 측정기기 프로토타입, Outlier 대응 정규화 함수, 자기지도 학습 기반 음성 메타학습, 다차원 텐서 기반 특징 선택, 텍스트 수도 레이블 생성 및 few-shot 메타학습 개발임. 기대 효과는 음성장애인 의사소통 지원, 잡음·레이블 부족 환경 대응, 의료·산업용 저비용 고효율 메타모델 확산 가능성 제시임.