Sign In

FARSIQA: Faithful and Advanced RAG System for Islamic Question Answering

Created by
  • Haebom
Category
Empty

저자

Mohammad Aghajani Asl, Behrooz Minaei Bidgoli

개요

본 논문은 대규모 언어 모델(LLM)이 종교 관련 질문 응답과 같은 전문 분야에서 직면하는 환각 및 불성실성 문제를 해결하기 위해, 페르시아어를 사용하는 이슬람 공동체를 위한 새로운 종단 간 시스템인 FARSIQA를 소개합니다. FARSIQA는 FAIR-RAG 아키텍처를 기반으로 하며, 복잡한 쿼리에 대해 동적이고 자기 수정 프로세스를 통해 적응적으로 쿼리를 분해하고, 증거의 충분성을 평가하며, 반복적인 루프를 거쳐 하위 쿼리를 생성하여 정보 격차를 채웁니다. 100만 개 이상의 권위 있는 이슬람 문서로 구성된 엄선된 지식 기반에서 작동하는 FARSIQA는 IslamicPCQA 벤치마크에서 뛰어난 성능을 보이며, 부정 거부율 97.0%, 정답률 74.3%를 달성하여 기존 시스템보다 향상된 결과를 보여줍니다.

시사점, 한계점

시사점:
페르시아어 이슬람 질문 응답 분야에서 새로운 기준을 제시.
반복적이고 적응적인 아키텍처가 민감한 도메인에서 충실하고 신뢰할 수 있는 AI 시스템 구축에 중요함을 입증.
부정 거부율의 괄목할 만한 향상 (40점).
한계점:
논문에서 한계점에 대한 직접적인 언급은 없음.
👍