# AQUA-Bench: Beyond Finding Answers to Knowing When There Are None in Audio Question Answering

### 저자

Chun-Yi Kuan, Hung-yi Lee

### 💡 개요

기존 오디오 질의응답 벤치마크는 답변 가능한 질문에 치우쳐 있어, 오디오에서 신뢰할 수 있는 답변을 추론할 수 없는 "답변 불가능한" 질문에 대한 평가가 부족했습니다. 이를 해결하기 위해 본 연구는 답변 불가능한 시나리오를 체계적으로 평가하는 AQUA-Bench를 제안하며, 모델의 신뢰성을 측정하고 강건한 오디오-언어 시스템 개발을 촉진합니다. 실험 결과, 모델들이 답변 가능한 질의에는 뛰어나지만 답변 불가능한 질의에는 어려움을 겪는다는 것을 보여주며 현재 오디오-언어 이해의 사각지대를 지적합니다.

### 🔑 시사점 및 한계

- 오디오 질의응답 모델의 신뢰성과 강건함을 평가하기 위한 새로운 벤치마크 AQUA-Bench를 제시합니다.

- 모델이 단순히 답을 찾는 것을 넘어, 답이 없음을 인지하는 능력을 평가하는 것이 중요함을 시사합니다.

- 답변 불가능한 시나리오에 대한 모델의 어려움을 드러내며, 향후 연구에서 이 부분을 보완해야 할 필요성을 제시합니다.

---

[PDF 보기](https://arxiv.org/pdf/2601.12248)

For the site tree, see the [root Markdown](https://slashpage.com/haebom.md).