Comparative Analysis of AI Agent Architectures for Entity Relationship Classification
Created by
Haebom
저자
Maryam Berijanian, Kuldeep Singh, Amin Sehati
개요
본 논문은 제한된 레이블 데이터와 복잡한 관계 구조를 가진 정보 추출 환경에서 엔티티 관계 분류 작업을 수행하기 위해 세 가지 AI 에이전트 아키텍처(반성적 자기 평가, 계층적 작업 분해, 다중 에이전트 동적 예시 생성)를 비교 분석합니다. 특히, 동적 예시 생성 기법은 실시간 협력적 및 적대적 프롬프트를 도입합니다. 다양한 도메인과 모델 백엔드에서 성능을 비교 분석한 결과, 다중 에이전트 조정이 표준 퓨샷 프롬프팅보다 우수하며, 미세 조정된 모델의 성능에 근접함을 보여줍니다. 이는 구조화된 관계 추출을 위한 모듈식이고 일반화 가능한 LLM 기반 시스템 설계에 대한 실용적인 지침을 제공합니다. 소스 코드와 데이터셋은 https://github.com/maryambrj/ALIEN.git 에서 이용 가능합니다.