본 논문은 자율주행 훈련 및 테스트를 위한 새로운 교통 시뮬레이션 프레임워크인 DriveGen을 제안합니다. 기존 데이터 기반 접근 방식의 한계점인 단일 실제 데이터셋 의존성을 극복하고자, 대규모 언어 모델과 시각 언어 모델을 활용하여 다양하고 현실적인 교통 상황을 생성합니다. DriveGen은 지도 및 차량 자산 생성을 위한 초기화 단계와, 시각 언어 모델 및 확산 플래너를 이용한 주행 경로 생성 단계로 구성됩니다. 또한, 자율주행 알고리즘의 실패 사례를 활용하여 추가적인 훈련이나 미세 조정 없이 코너 케이스를 자동으로 생성하는 DriveGen-CS 파이프라인을 개발하여 효과적인 downstream 최적화를 지원합니다. 실험 결과, DriveGen은 기존 방법보다 우수한 성능을 보이며, 자율주행 알고리즘의 성능 향상에 기여함을 확인했습니다.