Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Hierarchical Neuro-Symbolic Decision Transformer

Created by
  • Haebom
Category
Empty

저자

Ali Baheri, Cecilia O. Alm

개요

본 논문은 복잡하고 장기적인 의사결정 과제를 해결하기 위해 고전적인 심볼릭 계획과 트랜스포머 기반 정책을 결합한 계층적 신경-심볼 제어 프레임워크를 제시합니다. 상위 수준에서는 심볼릭 플래너가 논리적 명제를 기반으로 해석 가능한 연산자 시퀀스를 구성하여 전역적 제약 조건과 목표에 대한 체계적인 준수를 보장합니다. 하위 수준에서는 각 심볼릭 연산자가 하위 목표 토큰으로 변환되어 의사결정 트랜스포머가 불확실하고 고차원적인 환경에서 세분화된 일련의 동작을 생성하도록 조건을 줍니다. 본 논문에서는 심볼릭 플래너와 신경 실행 계층 모두에서 근사 오차가 어떻게 누적되는지에 대한 이론적 분석을 제공합니다. 여러 개의 키, 잠긴 문 및 아이템 수집 작업이 있는 그리드 월드에서의 실험적 평가는 계층적 접근 방식이 성공률과 정책 효율성 측면에서 순전히 엔드투엔드 신경 접근 방식보다 우수함을 보여줍니다.

시사점, 한계점

시사점:
복잡하고 장기적인 의사결정 문제에 대한 새로운 계층적 신경-심볼 제어 프레임워크 제시
심볼릭 계획과 트랜스포머 기반 정책의 결합을 통한 해석 가능성과 성능 향상
심볼릭 플래너와 신경 실행 계층의 근사 오차 누적에 대한 이론적 분석 제공
그리드 월드 실험을 통한 계층적 접근 방식의 우수성 검증
한계점:
제시된 프레임워크의 일반화 성능에 대한 추가적인 연구 필요
다양한 환경 및 문제 유형에 대한 확장성 검증 필요
심볼릭 플래너와 신경망 사이의 상호작용 및 정보 전달 메커니즘에 대한 더 자세한 분석 필요
👍