프로젝트 소개
본 과제는 청각장애인 및 농아인이 일반인과 원활히 소통할 수 있도록 지원하는 한국수어 통역 시스템 개발을 목표로 함. 특히, 비전 기술과 데이터 글러브를 활용한 멀티 모달 딥러닝 모델을 기반으로 수어 인식 정확도를 높이는 데 주력함.
연구 목표는 한국수어 인식을 위한 비전 기반 딥러닝 모델과 데이터 글러브 기술, 그리고 이들을 통합한 멀티 모달 딥러닝 모델 기술 개발을 통해 청각장애인/농아인이 쉽게 사용할 수 있는 한국수어 통역 시스템(SW)과 데이터 글러브(HW)를 구현하는 데 있음. 핵심 연구 내용은 사용자 요구사항 정의, UI/UX 설계, 스마트 장갑 인터랙션 도출 및 평가, 초소형 IMU 센서 모듈 개발, 멀티 모달 딥러닝 모델 및 한국수어 딥러닝 Pose 인식/Sequence Learning 모델 개발, 안드로이드 기반 프로토타입 시스템 개발 및 학습 데이터 수집·관리를 포함함. 기대 효과는 개발 기술의 타 분야 파급효과, 국내외 시장 선점, 농아인 취업 기회 확대, 사회복지 비용 절감 및 효과 증진을 통한 복지국가 기여로 전망됨.