DreamLLM-3D: Affective Dream Reliving using Large Language Model and 3D Generative AI
Created by
Haebom
Category
Empty
저자
Pinyao Liu, Keon Ju Lee, Alexander Steinmaurer, Claudia Picard-Deland, Michelle Carr, Alexandra Kitson
개요
DreamLLM-3D는 꿈을 재경험하기 위한 몰입형 예술 설치물 뒤에 있는 복합적 다중 모달 AI 시스템입니다. 대규모 언어 모델(LLM)과 텍스트-3D 생성 AI를 통합하여 몰입형 꿈 재현을 위한 자동화된 꿈 내용 분석을 가능하게 합니다. LLM은 음성으로 된 꿈 보고서를 처리하여 주요 꿈 개체(등장인물과 사물), 사회적 상호 작용 및 꿈의 감정을 식별합니다. 추출된 개체는 역동적인 3D 점 구름으로 시각화되며, 감정 데이터는 가상 꿈 환경의 색상과 사운드스케이프에 영향을 미칩니다. 또한, 경험적 AI-Dreamworker 하이브리드 패러다임을 제안합니다. 이 시스템과 패러다임은 잠재적으로 더욱 감정적으로 매력적인 꿈 재현 경험을 가능하게 하여 개인적 통찰력과 창의성을 향상시킬 수 있습니다.