Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

A Parallel Hybrid Action Space Reinforcement Learning Model for Real-world Adaptive Traffic Signal Control

Created by
  • Haebom
Category
Empty

저자

Yuxuan Wang, Meng Long, Qiang Wu, Wei Liu, Jiatian Pi, Xinmin Yang

개요

본 논문은 적응형 교통 신호 제어(ATSC)에서 실시간 의사결정의 복잡성을 해결하기 위해 병렬 하이브리드 액션 공간 강화 학습 모델(PH-DDPG)을 제시합니다. 기존의 2단계 모델과 달리, 신호 위상과 지속 시간을 동시에 최적화하여 동적이고 불확실한 교통 상황에 대한 적응력을 높였습니다. 특히, 위상 선택과 지속 시간 매개변수를 동시에 출력하는 병렬 하이브리드 액션 공간을 사용하여 통합적인 매개변수 최적화를 통해 동적 교통 상황에 대한 적응력을 향상시켰습니다. 또한, 임의 액션 매개변수 마스크를 사용한 ablation study를 통해 모델의 강건성과 효율성을 검증했습니다.

시사점, 한계점

시사점:
기존의 2단계 모델의 한계를 극복하는 새로운 ATSC 모델 제시
신호 위상 및 지속시간을 동시에 최적화하여 실시간 의사결정 효율 향상
병렬 하이브리드 액션 공간을 통해 동적 교통 상황에 대한 적응력 증대
ablation study를 통한 모델의 강건성 및 효율성 검증
한계점:
실제 교통 환경에서의 성능 검증에 대한 자세한 내용 부족
모델의 확장성 및 다양한 교통 상황에 대한 일반화 성능에 대한 추가 연구 필요
ablation study의 세부 내용 및 결과에 대한 자세한 설명 부족
👍