Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Interactive-KBQA: Multi-Turn Interactions for Knowledge Base Question Answering with Large Language Models

Created by
  • Haebom
Category
Empty

저자

Guanming Xiong, Junwei Bao, Wen Zhao

개요

본 논문은 지식 기반 질의응답(KBQA)에서 복잡한 질문을 실행 가능한 논리 형태로 파싱하는 어려움을 해결하기 위해 대규모 언어 모델(LLM)을 활용한 대화형 KBQA 프레임워크를 제시합니다. 기존의 의미 파싱(SP) 기반 방법들은 방대한 데이터 주석이 필요하지만, 본 연구는 LLM의 맥락 내 학습 기능을 활용하여 소량의 데이터로도 우수한 성능을 달성합니다. 지식 기반과의 직접적인 상호작용을 통해 논리 형태를 생성하는 세 가지 일반적인 API를 개발하고, 각 유형의 복잡한 질문에 대한 예시를 제공하여 LLM의 추론 과정을 안내합니다. WebQuestionsSP, ComplexWebQuestions, KQA Pro, MetaQA 데이터셋에서 경쟁력 있는 결과를 도출하며, 수동 개입을 통해 LLM 출력을 반복적으로 개선할 수 있는 장점을 가지고 있습니다. 단계별 추론 과정을 주석화한 데이터셋을 통해 모델의 적응력을 보여주고, KBQA 분야에 대한 상당한 개선 가능성을 제시합니다.

시사점, 한계점

시사점:
소량의 데이터만으로도 효과적인 KBQA 수행 가능성 제시.
대규모 언어 모델의 맥락 내 학습 능력을 KBQA에 효과적으로 활용.
지식 기반과의 직접적인 상호작용을 통한 논리 형태 생성 방식의 효율성 증명.
수동 개입을 통한 모델 성능 개선 및 사용자 친화적인 시스템 구축 가능성 제시.
단계별 추론 과정 주석 데이터셋을 통한 모델의 투명성 및 이해도 향상.
한계점:
제안된 API 및 예시의 일반화 가능성에 대한 추가 연구 필요.
다양한 유형의 복잡한 질문에 대한 일반화 성능 평가 필요.
수동 개입의 효율성 및 자동화 가능성에 대한 추가 연구 필요.
특정 지식 기반에 대한 의존성 및 다른 지식 기반으로의 전이 가능성 연구 필요.
👍