[공지사항]을 빙자한 안부와 근황 
Show more

Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

GOFAI meets Generative AI: Development of Expert Systems by means of Large Language Models

Created by
  • Haebom

저자

Eduardo C. Garrido-Merchan, Cristina Puente

개요

본 논문은 대규모 언어 모델(LLM)을 이용하여 제어되고 투명한 방식으로 전문가 시스템을 개발하는 새로운 접근 방식을 제시한다. 특정 영역으로 제한된 범위와 잘 구성된 프롬프트 기반 추출 방식을 사용하여 Prolog로 지식의 기호적 표현을 생성하고, 전문가에 의해 검증 및 수정될 수 있도록 한다. 이를 통해 해석 가능성, 확장성 및 신뢰성을 보장하는 전문가 시스템을 개발한다. Claude Sonnet 3.7과 GPT-4.1을 사용한 정량적 및 정성적 실험을 통해 생성된 지식 베이스의 사실 정확도와 의미적 일관성을 보여준다. LLM의 재현 능력과 기호 시스템의 정확성을 결합한 투명한 하이브리드 솔루션을 제시하여 민감한 영역에서 신뢰할 수 있는 AI 애플리케이션의 기반을 마련한다.

시사점, 한계점

시사점:
LLM의 한계(환각, 사실 오류)를 프롬프트 엔지니어링과 기호적 표현(Prolog)을 통해 극복하는 새로운 방법 제시
전문가 시스템 개발의 해석 가능성, 확장성 및 신뢰성 향상
민감한 영역에서의 신뢰할 수 있는 AI 애플리케이션 개발 가능성 제시
LLM의 재현 능력과 기호 시스템의 정확성을 결합한 하이브리드 접근 방식의 효용성 증명
한계점:
특정 영역으로 제한된 범위 내에서만 적용 가능
프롬프트 엔지니어링의 질에 따라 결과의 정확성이 크게 좌우될 수 있음
Prolog 전문가의 지식 및 검증 과정 필요
사용된 LLM의 성능에 의존적일 수 있음
👍