CHARMS: Cognitive Hierarchical Agent with Reasoning and Motion Styles
Created by
Haebom
저자
Jingyi Wang, Duanfeng Chu, Zejian Deng, Liping Lu
개요
본 논문은 자율 주행 시뮬레이션에서 차량 행동 모델링의 지능 저하 및 단순화 문제를 해결하기 위해, 추론 및 운전 스타일을 갖춘 인지적 계층적 에이전트(CHARMS)를 제안한다. CHARMS는 인간 운전자처럼 다른 차량의 행동을 추론하고 다양한 의사결정 스타일로 반응하여 시뮬레이션 환경 내 차량의 지능과 다양성을 향상시킨다. Level-k 행동 게임 이론을 도입하여 인간 운전자의 의사결정 과정을 모델링하고, 심층 강화 학습을 이용하여 다양한 의사결정 스타일을 갖춘 모델을 훈련하여 다양한 추론 방식과 행동 특성을 시뮬레이션한다. 또한, Poisson 인지 계층 이론을 기반으로 새로운 주행 시나리오 생성 방법을 제시하는데, 이는 Poisson 및 이항 분포를 사용하여 다양한 운전 스타일을 가진 차량의 비율을 제어하여 제어 가능하고 다양한 주행 환경을 생성한다. 실험 결과, CHARMS는 자율 주행 차량으로서 우수한 의사결정 능력을 보여줄 뿐만 아니라, 주변 차량으로서 더욱 복잡하고 다양한 주행 시나리오를 생성함을 보여준다. 소스 코드는 https://github.com/WUTAD-Wjy/CHARMS 에서 공개될 예정이다.