본 논문은 자연어 기반의 대화형 상호작용을 지원하는 모듈형 프레임워크인 Scene-Aware Conversational ADAS (SC-ADAS)를 제시합니다. SC-ADAS는 대규모 언어 모델, 비전-텍스트 변환, 구조화된 함수 호출 등의 생성형 AI 구성 요소를 통합하여 실시간으로 해석 가능하고 적응적인 운전자 지원을 가능하게 합니다. CARLA 시뮬레이터와 클라우드 기반 생성형 AI를 사용하여 구현된 SC-ADAS는 시각 및 센서 맥락에 기반한 다회차 대화를 지원하며, 자연어 권장 사항과 운전자 확인 ADAS 제어를 허용합니다. 모델 미세 조정 없이 확인된 사용자 의도를 구조화된 ADAS 명령어로 실행합니다. 시나리오 인식, 대화형, 반복적인 다회차 상호 작용에 대한 평가를 통해 비전 기반 맥락 검색으로 인한 지연 증가 및 누적 대화 기록으로 인한 토큰 증가와 같은 트레이드오프를 강조합니다.
