DiffHDR: Re-Exposing LDR Videos with Video Diffusion Models

Created by

Haebom

저자

Zhengming Yu, Li Ma, Mingming He, Leo Isikdogan, Yuancheng Xu, Dmitriy Smirnov, Pablo Salamanca, Dao Mi, Pablo Delgado, Ning Yu, Julien Philip, Xin Li, Wenping Wang, Paul Debevec

💡 개요

대부분의 디지털 비디오는 동적 범위가 낮은(LDR) 형식으로 저장되어 원본 고동적 범위(HDR) 장면의 정보가 손실됩니다. 본 논문은 비디오 확산 모델의 잠재 공간에서 생성적 복원 작업으로 LDR-HDR 변환을 공식화한 DiffHDR 프레임워크를 제안합니다. DiffHDR은 텍스트 프롬프트 또는 참조 이미지로 제어 가능한 LDR-HDR 비디오 변환을 지원하며, 합성된 HDR 비디오 데이터셋을 활용하여 기존 기법 대비 뛰어난 복원력과 시간적 안정성을 보여줍니다.

🔑 시사점 및 한계

•

LDR 비디오에서 손실된 HDR 정보를 복원하여 사실적인 장면 재조명을 가능하게 합니다.

•

텍스트나 이미지 기반 제어를 통해 사용자 맞춤형 HDR 비디오 변환이 가능합니다.

•

부족한 HDR 비디오 데이터 문제를 해결하기 위한 합성 데이터 생성 파이프라인을 제시합니다.

•

실제 세계의 복잡하고 극단적인 조명 조건에서의 성능 향상이 필요하며, 실시간 처리 가능성 탐색이 향후 과제로 남아있습니다.

PDF 보기

Made with Slashpage