청각장애 친화형 인터랙션 설계: 수어 방송과 음악 피치 훈련

Accessibility-Centered Interaction Design for Deaf Users: Sign Language TV and Musical Pitch Training

연구 내용

청각장애인의 정보 접근성을 높이기 위해 수어 방송 화면 배치와 실시간 피치 피드백 훈련을 설계·평가하는 연구

청각장애인과 난청인의 학습·정보 접근을 목표로 화면 구성과 피드백 인터랙션을 설계합니다. TV 방송 환경에서는 수어 통역사, 기준 영상, 자막의 역할을 사용자 조사로 분해하고, 통역사의 가시성 요구와 자막 제공 방식(다중 화자 개인 자막 등)을 실험 기반으로 정리하여 레이아웃을 제안합니다. 음악 영역에서는 음성 입력의 피치를 실시간 추정해 목표 음과의 일치 여부를 Knowledge of Results 형태로 시각 피드백하고, 슬라이더 기반 조절로 연습을 지원합니다. 추가로 야외 환경 웨이파인딩 표지의 색 대비와 가독성 설계 기준도 함께 도출합니다.

관련 프로젝트

5건

연구 흐름

초기 연구는 청각장애인의 정보 습득 과정과 기존 수어 서비스의 문제를 사용자 조사로 파악하고, TV 정보 전달 채널별로 요구되는 시각 요소를 구분하는 단계로 진행되었습니다. 이후 선호도·인터뷰·시선 추적을 통해 통역사와 자막의 배치 조건을 검증하고, 사용자가 내용을 더 빠르고 정확히 이해하도록 화면 구성을 구체화했습니다. 별도 축에서는 음정 인식의 어려움을 실시간 시각 피드백으로 해결하기 위해 피치 추정 기반 Knowledge of Results 인터페이스를 구현하고, 훈련 세션에서 음정·음량 조절 향상을 확인하는 연구를 수행했습니다. 최근에는 청각장애 음악 향유를 위한 실감가시화 기술과 디지털 치료제형 인터랙션까지 확장하고 있습니다.

활용 가능성

활용 가능성은 알앤디써클 특화 AI 에이전트가 생성한 내용으로, 실제 연구 가능 여부는 연구실과의 논의가 필요합니다.

수어 TV 방송 화면 배치 가이드
다중 화자 자막 설계 기준
실시간 시각 피치 피드백 트레이닝
청각장애 음악 학습용 인터랙션
목표 음 비교 기반 연습 인터페이스
색 대비 기반 웨이파인딩 설계
정보 계층화를 위한 UI 구성
공감각 기반 음악·댄스 시각화
디지털 치료제 게이미피케이션 설계
청각 접근성 검증 프로토콜