Ultra3D: Efficient and High-Fidelity 3D Generation with Part Attention
Created by
Haebom
저자
Yiwen Chen, Zhihao Li, Yikai Wang, Hu Zhang, Qin Li, Chi Zhang, Guosheng Lin
개요
본 논문은 희소 볼륨 셀 표현을 이용한 3D 콘텐츠 생성의 효율성을 높이는 Ultra3D 프레임워크를 제안합니다. 기존의 2단계 확산 모델은 어텐션 메커니즘의 이차 복잡도로 인해 계산 비효율성이 심각한 문제였는데, Ultra3D는 VecSet 표현을 활용하여 첫 번째 단계에서 객체 레이아웃을 효율적으로 생성하고 토큰 수를 줄여 볼륨 셀 좌표 예측을 가속화합니다. 두 번째 단계에서는 기하학적 인식을 기반으로 한 부분 어텐션(Part Attention) 메커니즘을 도입하여 의미적으로 일관된 부분 영역 내에서만 어텐션 계산을 제한함으로써 구조적 연속성을 유지하고 불필요한 전역 어텐션을 피합니다. 이를 통해 최대 6.7배의 잠재 변수 생성 속도 향상을 달성하며, 1024 해상도의 고해상도 3D 생성을 지원하고 시각적 충실도와 사용자 선호도 측면에서 최첨단 성능을 달성합니다. 또한, 원시 메시를 부분 레이블이 지정된 희소 볼륨 셀로 변환하는 확장 가능한 부분 주석 파이프라인을 구축합니다.
시사점, 한계점
•
시사점:
◦
희소 볼륨 셀 표현 기반 3D 모델 생성의 속도를 크게 향상시켰습니다. (최대 6.7배 속도 향상)
