WorldScore: A Unified Evaluation Benchmark for World Generation
Created by
Haebom
저자
Haoyi Duan, Hong-Xing Yu, Sirui Chen, Li Fei-Fei, Jiajun Wu
개요
WorldScore 벤치마크는 최초의 통합된 세계 생성 벤치마크입니다. 카메라 궤적 기반 레이아웃 명세를 사용하여 세계 생성을 일련의 다음 장면 생성 작업으로 분해하여 3D 및 4D 장면 생성부터 비디오 생성 모델까지 다양한 접근 방식을 통합적으로 평가할 수 있도록 합니다. WorldScore 벤치마크는 정적 및 동적, 실내 및 실외, 사실적 및 스타일리쉬한 다양한 세계를 포함하는 3,000개의 테스트 사례로 구성된 큐레이션된 데이터셋을 포함합니다. WorldScore 지표는 제어 가능성, 품질, 역동성이라는 세 가지 주요 측면을 통해 생성된 세계를 평가합니다. 오픈소스 및 클로즈드소스 모델을 포함한 19개의 대표적인 모델에 대한 광범위한 평가를 통해 각 모델 범주의 주요 통찰력과 과제를 밝힙니다. 데이터셋, 평가 코드 및 리더보드는 https://haoyi-duan.github.io/WorldScore/ 에서 확인할 수 있습니다.