Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

NeuSym-RAG: Hybrid Neural Symbolic Retrieval with Multiview Structuring for PDF Question Answering

Created by
  • Haebom

저자

Ruisheng Cao, Hanchong Zhang, Tiancheng Huang, Zhangyi Kang, Yuxin Zhang, Liangtai Sun, Hanqi Li, Yuxun Miao, Shuai Fan, Lu Chen, Kai Yu

개요

본 논문은 방대한 학술 논문들 속에서 핵심 정보를 효율적으로 얻는 데 어려움을 겪는 연구자들을 위한 해결책으로, Retrieval Augmented Generation (RAG) 기반의 자동 질의응답 시스템인 NeuSym-RAG를 제안한다. 기존 RAG 연구들이 신경망 기반 검색과 기호 기반 검색을 개별적으로 활용하는 한계를 극복하고자, 두 방식을 상호작용적으로 결합하는 하이브리드 접근 방식을 채택했다. 다중 관점 청크화(multi-view chunking)와 스키마 기반 파싱(schema-based parsing)을 통해 PDF의 구조적 정보(섹션, 표 등)를 활용하여 반정형 PDF 콘텐츠를 관계형 데이터베이스와 벡터 저장소에 동시에 저장하고, LLM 에이전트가 필요한 정보를 반복적으로 수집하여 답변을 생성한다. AIRQA-REAL을 포함한 세 개의 전문 PDF 기반 질의응답 데이터셋에 대한 실험 결과, NeuSym-RAG는 벡터 기반 RAG 및 다양한 구조적 기준 모델들을 안정적으로 능가하는 성능을 보였다. 코드와 데이터는 공개적으로 제공된다.

시사점, 한계점

시사점:
신경망 기반 검색과 기호 기반 검색의 장점을 통합하여 RAG 성능 향상을 달성.
다중 관점 청크화 및 스키마 기반 파싱을 통해 PDF의 구조적 정보를 효과적으로 활용.
LLM 에이전트의 반복적 정보 수집을 통해 더욱 정확한 답변 생성 가능.
세 개의 실험 데이터셋에서 기존 방법 대비 우수한 성능 검증.
코드와 데이터 공개를 통한 연구의 재현성 및 확장성 확보.
한계점:
제안된 모델의 성능은 특정 데이터셋에 국한될 가능성 존재.
다양한 유형의 PDF 문서에 대한 일반화 성능 검증 필요.
실험 데이터셋의 규모 및 다양성이 향후 성능 개선에 영향을 미칠 수 있음.
복잡하고 비정형적인 PDF 문서에 대한 처리 성능 평가 필요.
👍