Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Analytical Lyapunov Function Discovery: An RL-based Generative Approach

Created by
  • Haebom

저자

Haohan Zou, Jie Feng, Hao Zhao, Yuanyuan Shi

개요

비선형 동역학 시스템에 대한 유효한 Lyapunov 함수를 찾는 것은 여전히 어려운 문제이다. 기존의 신경망 기반 접근 방식은 확장 가능한 검증 및 해석 가능성의 제한이라는 두 가지 주요 문제점을 갖는다. 본 논문에서는 이러한 문제점을 해결하기 위해, 해석적 Lyapunov 함수(local)를 구성하는 트랜스포머 기반의 end-to-end 프레임워크를 제안한다. 이 프레임워크는 후보 Lyapunov 함수를 생성하는 트랜스포머 기반 트레이너와 후보 표현식을 검증하고 위험 추구 정책 경사도를 통해 모델을 개선하는 falsifier로 구성된다. 본 모델은 사전 훈련을 사용하지 않고 강화 학습(RL)을 통해 처음부터 훈련되며, 고차원 및 비다항 시스템에 대한 지역 Lyapunov 함수를 찾는 데 성공한다. 후보의 해석적 특성을 고려하여, 훈련 중에는 효율적인 최적화 방법을, 최종 검증에는 형식적 검증 도구를 사용한다. 최대 10차원의 다양한 비선형 동역학 시스템에서 접근 방식의 효율성을 보여주고, 이전에는 제어 분야에서 확인되지 않았던 Lyapunov 함수를 발견할 수 있음을 보여준다. 전체 구현은 Github에서 확인 가능하다.

시사점, 한계점

시사점:
트랜스포머를 이용하여 고차원 및 비다항 시스템에서 지역적 해석적 Lyapunov 함수를 효율적으로 찾는 새로운 프레임워크 제시.
기존 연구에서 발견하지 못한 Lyapunov 함수 발견 가능성 제시.
형식적 검증 및 해석성 향상을 통한 신뢰도 높은 Lyapunov 함수 생성.
강화학습 기반 학습으로 사전 훈련 없이 모델 학습 가능.
한계점:
현재 제안된 프레임워크는 지역적 Lyapunov 함수에 초점을 맞추고 있음. 전역적 Lyapunov 함수 발견에 대한 추가 연구 필요.
다양한 시스템에 대한 일반화 성능 평가가 추가적으로 필요.
고차원 시스템으로 갈수록 계산 비용 증가 가능성 존재.
👍