본 논문은 음성 변환(Voice Conversion, VC)에서 소스 화자의 음색 정보가 콘텐츠 표현에 내재되어 타겟 화자와의 유사성을 저하시키는 음색 누출 문제를 해결하는 새로운 방법을 제시합니다. 이를 위해, 콘텐츠 추출기에 Universal Semantic Matching (USM) residual block을 도입합니다. USM residual block은 두 개의 가중치가 부여된 가지로 구성됩니다. 첫 번째 가지는 다양한 화자의 음성을 사용하여 통계적으로 계산된 보편적인 의미론적 사전(universal semantic dictionary) 기반의 Content Feature Re-expression (CFR) 모듈로, 음색이 제거된 콘텐츠 표현을 제공합니다. 두 번째 가지는 원본 콘텐츠 계층에 대한 skip connection으로, 세밀한 정보를 보완적으로 제공합니다. CFR 모듈은 각 콘텐츠 프레임을 사전 항목의 가중 선형 조합으로 표현하여 음색이 제거된 콘텐츠 표현을 얻습니다. 다양한 VC 프레임워크에서의 광범위한 실험을 통해 제안된 방법이 음색 누출을 효과적으로 완화하고 타겟 화자와의 유사성을 크게 향상시킨다는 것을 보여줍니다.