Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

OraPlan-SQL: A Planning-Centric Framework for Complex Bilingual NL2SQL Reasoning

Created by
  • Haebom

저자

Marianne Menglin Liu, Sai Ashish Somayajula, Syed Fahad Allam Shah, Sujith Ravi, Dan Roth

개요

OraPlan-SQL은 복잡한 추론을 요구하는 이중 언어 벤치마크인 Archer NL2SQL Evaluation Challenge 2025에서 1위를 차지한 시스템입니다. 영어와 중국어에서 각각 55.0%와 56.7%의 실행 정확도(EX)를 달성하며 2위 시스템보다 6% 이상 높았고, 99% 이상의 SQL 유효성(VA)을 유지했습니다. 계획을 생성하는 Planner 에이전트와 이 계획을 실행 가능한 SQL로 변환하는 SQL 에이전트로 구성된 에이전트 프레임워크를 따릅니다. 단일 플래너를 개선하기 위해 피드백 기반 메타 프롬프트 전략을 도입하고, 다국어 시나리오를 위해 엔티티 연결 가이드라인을 통합했으며, 계획 다양화를 통해 신뢰성을 향상시켰습니다.

시사점, 한계점

시사점:
단일 플래너를 사용한 효율적인 계획 수립: 여러 하위 에이전트 대신 단일 플래너를 사용하여 오케스트레이션 오버헤드를 줄임.
피드백 기반 메타 프롬프트: 실패 사례를 기반으로 플래너를 개선하여 일반화 성능 향상.
엔티티 연결 가이드라인: 다국어 문제 해결을 위해 엔티티의 대체 표면 형태를 생성하고 계획에 명시적으로 포함.
계획 다양화: 다수의 계획을 생성하고 과반수 투표를 통해 최종 결과 선택, 신뢰성 향상.
한계점:
논문에서 한계점에 대한 직접적인 언급은 없음. (추론 필요)
👍