Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

R2-KG: General-Purpose Dual-Agent Framework for Reliable Reasoning on Knowledge Graphs

Created by
  • Haebom
Category
Empty

저자

Sumin Jo, Junseong Choi, Jiho Kim, Edward Choi

개요

본 논문은 지식 그래프(KG) 기반 추론에서 대규모 언어 모델(LLM)의 한계를 극복하기 위해, 역할 분담 기반의 플러그 앤 플레이 추론 프레임워크인 R2-KG를 제안합니다. R2-KG는 증거 수집을 담당하는 Operator(저용량 LLM)와 최종 판단을 내리는 Supervisor(고용량 LLM)의 두 에이전트로 구성되어, 고용량 LLM에 대한 의존성을 줄이고 비용 효율성을 높입니다. 또한, 충분한 증거가 확보될 때만 답변을 생성하는 Abstention 메커니즘을 통해 신뢰성을 향상시킵니다. 다양한 KG 기반 추론 작업에 대한 실험 결과, R2-KG는 기존 방식보다 정확도와 신뢰성이 모두 우수하며, Operator로 사용되는 LLM의 성능에 덜 의존적인 것으로 나타났습니다. 단일 에이전트 버전의 R2-KG는 높은 신뢰성을 달성하지만, 복잡한 KG에서는 높은 기권율을 보이는 한계를 가지고 있습니다.

시사점, 한계점

시사점:
저용량 LLM과 고용량 LLM의 역할 분담을 통해 비용 효율적인 KG 기반 추론이 가능함을 보여줌.
Abstention 메커니즘을 통해 추론의 신뢰성을 크게 향상시킴.
Operator LLM의 성능에 덜 의존적인 강건한 시스템을 구축함.
단일 에이전트 버전은 고신뢰도 추론을 위한 효율적인 대안을 제공함.
한계점:
단일 에이전트 버전의 경우 복잡한 KG에서 높은 기권율을 보임.
다양한 유형의 KG와 추론 작업에 대한 일반화 성능에 대한 추가 연구가 필요함.
👍