Time of the Flight of the Gaussians: Optimizing Depth Indirectly in Dynamic Radiance Fields
Created by
Haebom
저자
Runfeng Li, Mikhail Okunev, Zixuan Guo, Anh Ha Duong, Christian Richardt, Matthew O'Toole, James Tompkin
개요
단일 뷰포인트에서 고품질 동적 3D 재구성을 빠르게 달성하는 것은 컴퓨터 비전 분야의 중요한 과제입니다. 본 논문에서는 연속파 ToF(C-ToF) 카메라의 원시 센서 샘플을 사용하여 동적 장면을 재구성하는 방법을 제시합니다. 신경 부피 접근 방식과 유사하거나 더 나은 정확도를 달성하면서 100배 빠른 속도를 제공합니다. 기존의 3D 가우시안 스플래팅 기반의 빠른 표현 방식은 다중 뷰 데이터에서 만족스러운 결과를 생성하지만, 단일 뷰 C-ToF 데이터에서는 최적화가 불안정합니다. 본 논문에서는 가우시안으로 표현된 장면 기하학의 정확도를 향상시키기 위해 두 가지 휴리스틱을 최적화에 통합합니다. 실험 결과는 야구 배트의 빠른 움직임과 같은 제약된 C-ToF 감지 조건에서도 정확한 재구성을 생성함을 보여줍니다.
시사점, 한계점
•
시사점:
◦
단일 C-ToF 카메라를 이용한 빠르고 정확한 동적 3D 재구성 가능성 제시.
◦
기존 신경망 기반 방법보다 100배 빠른 속도 달성.
◦
빠른 움직임의 장면에도 정확한 재구성 가능성 확인.
•
한계점:
◦
제시된 방법이 단일 뷰에 의존하기 때문에 다중 뷰 기반 방법에 비해 깊이 정보의 부족 가능성 존재.
◦
제약된 C-ToF 감지 조건에서의 성능 평가이며, 다양한 조건에 대한 일반화 성능은 추가적인 연구가 필요.
◦
사용된 휴리스틱의 일반성과 다른 유형의 센서나 장면에 대한 적용성에 대한 추가적인 검증 필요.
