청각장애인은 보청기나 인공와우이식기를 사용하더라도 음정 인식의 문제로 인해 노래 부르기에 어려움을 겪는다. 본 연구는 실시간 시각적 피드백을 제공하는 대화형 훈련 애플리케이션을 개발함으로써 이 문제를 다룬다. 여기에는 노래한 음정이 의도한 음과 일치하는지를 알려주는 결과지식(Knowledge of Results, KR)-외부 피드백이 포함된다. 사용자가 소리를 생성하면, 애플리케이션은 RAPT(Robust Algorithm for Pitch Tracking)를 사용하여 그 소리의 음정을 감지하고 해당하는 악보의 음표를 표시한다. 실시간 음정 슬라이더는 사용자가 목표 음표에 비해 자신의 음정을 모니터링하고 조정할 수 있게 해준다. 이러한 이중 피드백 메커니즘은 사용자가 연습 중 자신의 발성을 능동적으로 조절하도록 돕는다. 본 시스템은 청각장애 참여자 10명과 함께 노래 훈련 세션 4회에서 시험되었다. 그 결과 참여자들은 “Twinkle Twinkle Little Star”를 성공적으로 부를 수 있었다. 훈련을 통해 이들은 음정 및 음량 조절을 향상시키고 기본적인 노래 기법에 대한 기초적 이해를 형성할 수 있었다. 본 애플리케이션은 전통적으로 음악 교육에서 배제되어 온 개인들에게 효과적인 노래 훈련을 제공할 가능성을 보여준다. 시각적이고 대화형 피드백을 통해 자기조절 학습을 지원함으로써, 본 시스템은 청각장애 공동체의 음악 학습에서 포용성을 증진하기 위한 의미 있는 교육 도구를 제공한다.

*본 초록은 AI를 통해 원문을 번역한 내용입니다. 정확한 내용은 하기 원문에서 확인해주세요.