ReasonAudio: A Benchmark for Evaluating Reasoning Beyond Matching in Text-Audio Retrieval

Thu, 07 May 2026 08:09:36 GMT

### 저자

Honglei Zhang, Yuting Chen, Chenpeng Hu, Siyue Zhang, Yilei Shi

### 💡 개요

본 논문은 텍스트-오디오 검색에서 단순한 의미 일치를 넘어서는 복잡한 추론 능력을 평가하기 위한 새로운 벤치마크인 ReasonAudio를 제안합니다. ReasonAudio는 부정, 순서, 동시 발생, 지속 시간 등 다섯 가지 기본 추론 작업을 포함하는 1,000개의 쿼리와 10,000개의 복합 오디오 클립으로 구성되어 있습니다. 현재 최신 모델들이 ReasonAudio 벤치마크에서 추론 기반 검색에 어려움을 겪고 있으며, 특히 부정 및 지속 시간 추론에서 성능이 저조하다는 사실을 밝혔습니다.

### 🔑 시사점 및 한계

- 기존 텍스트-오디오 검색 벤치마크가 단순 의미 일치에만 집중하여, 실제 사용자의 복잡한 추론 요구를 충족시키지 못함을 지적합니다.

- ReasonAudio 벤치마크는 부정, 순서, 동시 발생, 지속 시간 등 실세계의 다양한 추론 능력을 요구하는 텍스트-오디오 검색 시스템 평가의 필요성을 강조합니다.

- 현재 최신 모델들, 특히 멀티모달 LLM 기반 임베딩 모델들이 대조 학습 미세 조정을 통해 추론 능력을 효과적으로 계승하지 못하며, 현재의 훈련 패러다임이 검색 환경에서 추론 능력을 보존하는 데 충분하지 않다는 한계점을 보여줍니다.

---

[PDF 보기](https://arxiv.org/pdf/2605.03361)