Sign In

Track, Inpaint, Resplat: Subject-driven 3D and 4D Generation with Progressive Texture Infilling

Created by
  • Haebom
Category
Empty

저자

Shuhong Zheng, Ashkan Mirzaei, Igor Gilitschenski

개요

본 논문은 특정 대상의 정체성을 유지하면서 3D/4D 콘텐츠를 생성하는 새로운 방법인 TIRE (Track, Inpaint, REsplat)를 소개합니다. 기존 3D 생성 모델로 생성된 초기 3D 에셋을 입력으로 받아, 비디오 트래킹을 통해 수정이 필요한 영역을 식별하고, 대상 기반 2D 인페인팅 모델을 사용하여 점진적으로 채워 넣습니다. 마지막으로, 수정된 2D 다중 뷰 관측치를 3D로 다시 splatting하여 일관성을 유지합니다.

시사점, 한계점

•
시사점:
◦
개인화된 3D/4D 콘텐츠 생성을 위한 새로운 방법론 제시.
◦
기존 방법론에 비해 대상의 정체성 보존 능력이 향상됨.
◦
혁신적인 접근 방식 (트래킹, 인페인팅, 리스플랫)을 통해 3D/4D 생성 문제 해결.
•
한계점:
◦
논문에서 구체적인 한계점 언급 없음.
◦
추가적인 연구를 통해 성능 향상 및 일반화 가능성 탐구 필요.
◦
모델의 효율성 및 다양한 대상에 대한 적용 가능성 추가 평가 필요.
👍
Made with Slashpage