Enhancing Speaker Verification with Whispered Speech via Post-Processing

Created by

Haebom

저자

Magdalena Go{\l}\k{e}biowska, Piotr Syga

💡 개요

본 논문은 음성 인증 시스템에서 속삭이는 음성으로 인한 성능 저하 문제를 해결하기 위한 새로운 모델과 훈련 방식을 제안한다. 제안된 모델은 기존의 음성 인증 모델을 미세 조정하고, 코사인 유사도 기반 분류 및 트라이플렛 손실을 함께 사용하여 속삭이는 음성에 대한 강건성을 향상시킨다. 이를 통해 일반 음성 대비 속삭이는 음성 인식에서 22.26%의 성능 향상과 98.16%의 AUC를 달성했으며, 속삭이는 음성 간 비교에서는 15% 향상된 1.88%의 EER을 기록했다.

🔑 시사점 및 한계

•

속삭이는 음성에 대한 음성 인증 시스템의 성능을 획기적으로 개선하여 프라이버시 보호, 소음 회피, 질병 등으로 인해 속삭이는 음성을 사용하는 실제 환경에서의 적용 가능성을 높였다.

•

기존의 최첨단 모델 대비 우수한 성능을 보이며, 속삭이는 음성 환경에서의 음성 인증 연구에 대한 새로운 기준을 제시한다.

•

속삭이는 음성에서 노이즈에 대한 민감도가 일반 음성보다 더 높게 나타나, 향후 노이즈 환경에서의 강건성 확보가 추가적인 과제로 남는다.

PDF 보기

Made with Slashpage