Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

RNN-Transducer-based Losses for Speech Recognition on Noisy Targets

Created by
  • Haebom

저자

Vladimir Bataev

개요

본 논문은 산업 환경에서 대규모 데이터셋의 정확한 전사가 어려운 점을 고려하여, 오류가 있는 전사본으로 음성 인식 시스템을 훈련하는 문제를 해결하는 새로운 손실 함수를 제안합니다. RNN-Transducer 모델에 적용되는 세 가지 새로운 손실 함수, Star-Transducer, Bypass-Transducer, 그리고 Target-Robust Transducer를 소개합니다. Star-Transducer는 "skip frame" 전이를 통해 삭제 오류를, Bypass-Transducer는 "skip token" 전이를 통해 삽입 오류를 해결하며, Target-Robust Transducer는 두 방법을 결합하여 임의의 오류에 강건한 성능을 제공합니다. 실험 결과, Target-Robust Transducer 손실 함수는 정확한 전사본으로 훈련된 모델 대비 70% 이상의 성능을 회복하여 오류가 있는 데이터에서 RNN-T 모델의 성능을 크게 향상시켰음을 보여줍니다.

시사점, 한계점

시사점:
오류가 있는 전사본으로 훈련된 음성 인식 모델의 성능 저하 문제를 효과적으로 해결하는 새로운 손실 함수를 제시합니다.
Star-Transducer와 Bypass-Transducer는 각각 삭제 및 삽입 오류에 특화된 해결책을 제공하며, Target-Robust Transducer는 이를 통합하여 더욱 강건한 성능을 보입니다.
산업 환경에서 대규모 데이터셋을 활용하여 음성 인식 시스템을 효율적으로 훈련하는 데 기여할 수 있습니다.
한계점:
제안된 손실 함수의 성능 향상 정도는 데이터셋의 특성 및 오류 유형에 따라 달라질 수 있습니다.
다른 유형의 오류 (예: 치환 오류)에 대한 효과적인 대응 방안이 추가적으로 연구되어야 합니다.
실험 결과에서 70% 이상의 성능 회복은 상대적인 수치이며, 절대적인 성능 수준에 대한 추가적인 분석이 필요합니다.
👍