Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

TSPC: A Two-Stage Phoneme-Centric Architecture for code-switching Vietnamese-English Speech Recognition

Created by
  • Haebom

저자

Minh N. H. Nguyen, Anh Nguyen Tran, Dung Truong Dinh, Nam Van Vo

개요

본 논문은 베트남어-영어 코드 전환(CS) 음성 인식(ASR)을 위한 새로운 아키텍처인 Two-Stage Phoneme-Centric model (TSPC)을 제안한다. TSPC는 확장된 베트남어 음소 집합을 중간 표현으로 사용하는 음소 중심 접근 방식을 채택하여 혼합 언어 모델링을 용이하게 한다. 실험 결과, TSPC는 PhoWhisper-base를 포함한 기존 기준 모델보다 베트남어-영어 CS ASR에서 상당히 낮은 단어 오류율(19.9%)을 달성하며, 적은 훈련 자원으로도 우수한 성능을 보임을 보여준다. 또한, 음성 기반의 2단계 아키텍처는 복잡한 CS 베트남어-영어 ASR 시나리오에서 음소 적응 및 언어 변환을 통해 ASR 성능을 향상시킨다.

시사점, 한계점

시사점:
베트남어-영어 코드 전환 음성 인식에서 기존 모델보다 낮은 단어 오류율 달성 (19.9%).
제한된 훈련 자원으로도 우수한 성능을 보임.
음소 중심 접근 방식을 통한 혼합 언어 모델링의 효과 입증.
음소 적응 및 언어 변환을 통한 ASR 성능 향상 가능성 제시.
한계점:
제안된 모델의 일반화 성능에 대한 추가적인 연구 필요. (다른 언어 쌍에 대한 적용 가능성 검증)
사용된 데이터셋 및 실험 설정에 대한 자세한 정보 부족.
다른 코드 전환 유형이나 더 복잡한 언어 쌍에 대한 성능 평가 부족.
👍