본 연구는 인간의 달팽이관(cochlea) 내에서 기저막(basilar membrane)의 진행파(traveling wave) 전파를 모방하는 것을 목적으로 하는 음향을 가시화하기 위한 새로운 접근법에 대한 초기 연구를 제시한다. 일반적으로 음향(즉, 음성)에서 발화 인식을 위한 주파수 정보를 추출하려면 고속 푸리에 변환(FFT)이 필요하다. 이 알고리즘은 내재된 빠른 재귀적 구조로 인해 실시간 주파수 추출을 보장하지만, 고급 음성 인식을 위해서는 새로운 주파수 선택성(frequency selectivity) 기법의 개발이 필요하다. 본 연구에서는 이미지 센서를 사용하여 달팽이관 영감을 받은 음향 가시화가 새로운 주파수 선택성을 제공할 가능성을 탐색한다. 실험용 시제품 모델을 제작하고 카메라로 주파수 의존적인 파동 전파 운동의 영상을 포착한 뒤, 모션 매그니피케이션(motion magnification)을 통해 2D 이미지를 재현한다. 본 접근법은 주파수 정보 추출에 FFT가 필요하지 않다는 점에서 음성 인식 시스템에 대한 유망한 응용 가능성을 제공하나, 추가로 검토되어야 할 여러 기술적 문제가 남아 있다.
*본 초록은 AI를 통해 원문을 번역한 내용입니다. 정확한 내용은 하기 원문에서 확인해주세요.