Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Conversational Explanations: Discussing Explainable AI with Non-AI Experts

Created by
  • Haebom
Category
Empty

저자

Tong Zhang, Mengao Zhang, Wei Yan Low, X. Jessie Yang, Boyang Li

개요

본 논문은 설명 가능한 AI(XAI) 분야에서 사용자의 다양한 지식 수준과 정보 요구에 맞춘 대화형 설명 시스템을 제안합니다. 기존 XAI 접근 방식의 한계인 정적인 일회성 설명을 극복하기 위해, 대화형 설명 시스템을 구축하지만, 훈련 데이터 부족 문제에 직면합니다. 이를 해결하기 위해, 본 논문에서는 데이터 다양성을 높이는 반복 페널티와 허위 데이터를 걸러내는 환각 감지기를 도입한 EMCEE(fEw-shot Multi-round ConvErsational Explanation) 시스템을 제안합니다. EMCEE는 합성 데이터로 훈련되었으며, 자동 평가(BLEU, ROUGE 향상)와 인간 평가(사용자 이해도, 수용도, 신뢰도, 협업 향상) 모두에서 기존 모델들을 능가하는 성능을 보였습니다. 특히, 자체 생성 합성 데이터 훈련을 통해 더 정확하고 이해하기 쉬운 답변을 생성하여 사용자 상호 작용을 개선하는 것을 보여줍니다. 이는 정적 설명 이후 자유 형식의 사용자 질문에 답변할 수 있는 최초의 대화형 설명 방법입니다.

시사점, 한계점

시사점:
사용자 맞춤형 대화형 XAI 설명 시스템 구축의 가능성을 제시합니다.
합성 데이터를 효과적으로 활용하여 대화형 XAI 시스템 훈련 문제를 해결하는 새로운 방법을 제시합니다.
EMCEE는 자동 및 인간 평가 모두에서 기존 방법보다 우수한 성능을 보임으로써 실용성을 입증합니다.
정적 설명 이후의 자유 형식 질문 대응을 통해 XAI의 활용성을 확장합니다.
한계점:
합성 데이터 사용으로 인한 데이터 편향 및 일반화 성능 저하 가능성이 존재합니다. (환각 감지기를 사용했지만 완벽하지 않을 수 있음)
현재는 영어 기반으로 개발되었으며, 다른 언어로의 확장성에 대한 검증이 필요합니다.
대규모 실제 데이터셋을 활용한 평가가 부족합니다.
특정 도메인에 국한된 설명의 일반화 가능성에 대한 추가 연구가 필요합니다.
👍