StageDesigner: Artistic Stage Generation for Scenography via Theater Scripts
Created by
- Haebom
Category
Empty
저자
Zhaoxing Gan, Mengtian Li, Ruhua Chen, Zhongxia Ji, Sichen Guo, Huanling Hu, Guangnan Ye, Zuo Hu
개요
본 논문은 대규모 언어 모델과 레이아웃 제어 확산 모델을 결합하여 예술적인 무대를 생성하는 최초의 포괄적인 프레임워크인 StageDesigner를 소개합니다. StageDesigner는 무대 미술의 전문적인 요구사항을 고려하여 노련한 아티스트의 작업 과정을 시뮬레이션하여 몰입형 3D 무대 장면을 생성합니다. 세 가지 주요 모듈(각본 분석, 전경 생성, 배경 생성)로 구성되어 있으며, 각본 분석 모듈은 입력 각본에서 주제 및 공간적 단서를 추출하고, 전경 생성 모듈은 필수적인 3D 객체를 구성하고 배치하며, 배경 생성 모듈은 서사적 분위기에 맞는 조화로운 배경을 생성하고 전경과 배경 요소 간의 폐색을 관리하여 공간적 일관성을 유지합니다. 또한, 다양한 역사적 스타일을 포괄하고 각본, 이미지, 상세한 3D 레이아웃으로 주석이 달린 276개의 고유한 무대 장면으로 구성된 전용 데이터셋인 StagePro-V1을 소개합니다. 표준 및 새롭게 제안된 지표를 사용한 평가와 광범위한 사용자 연구를 통해 StageDesigner의 효과를 입증합니다.
시사점, 한계점
•
시사점:
◦
대규모 언어 모델과 확산 모델을 결합하여 무대 디자인 분야에 새로운 가능성을 제시.
◦
전문적인 수준의 3D 무대 장면 생성을 자동화하여 효율성 증대.
◦
StagePro-V1 데이터셋 제공을 통해 향후 연구에 기여.
◦
새로운 평가 지표 제시를 통한 객관적인 성능 평가.
•
한계점:
◦
StagePro-V1 데이터셋의 규모가 상대적으로 작을 수 있음.
◦
생성된 무대 장면의 예술적 완성도에 대한 주관적인 평가 필요.
◦
실제 무대 제작 과정과의 차이점 및 한계 고려 필요.
◦
특정 스타일이나 장르에 편향될 가능성 존재.
