Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Conditional Deep Generative Models for Belief State Planning

Created by
  • Haebom

저자

Antoine Bigeard, Anthony Corso, Mykel Kochenderfer

개요

본 논문은 고차원 상태를 가진 부분적으로 관측 가능한 마르코프 결정 과정(POMDP)에서의 신념 표현 문제를 해결하기 위해 조건부 심층 생성 모델(cDGMs)을 활용하는 새로운 접근법을 제시합니다. 기존의 신념 표현 방식과 달리, cDGMs는 고차원 상태와 많은 관측값에 적합하며, 사후 신념에서 임의의 수의 샘플을 생성할 수 있습니다. 무작위 전개 궤적에서 생성된 데이터로 cDGMs를 훈련하고, 크고 연속적인 상태 공간을 가진 광물 탐사 POMDP 문제를 풀면서 그 효과를 보여줍니다. 실험 결과, cDGMs는 신념 정확도와 계획 성능 측면에서 입자 필터 기반 기준 모델보다 우수한 성능을 보입니다.

시사점, 한계점

시사점:
고차원 상태를 갖는 POMDP 문제에 대한 효과적인 신념 표현 방법 제시
조건부 심층 생성 모델(cDGMs)을 이용한 새로운 POMDP 해결 접근법 제시
광물 탐사와 같은 실제 문제에 대한 적용 가능성을 입증
입자 필터 기반 방법보다 우수한 성능을 보임
한계점:
제시된 방법의 성능이 특정 문제(광물 탐사 POMDP)에 국한될 가능성 존재
cDGMs 훈련에 필요한 데이터 양이 클 수 있음
다른 유형의 POMDP 문제에 대한 일반화 가능성에 대한 추가 연구 필요
👍