FRBNet: Revisiting Low-Light Vision through Frequency-Domain Radial Basis Network
Created by
Haebom
저자
Fangtong Sun, Congyu Li, Ke Yang, Yuchen Pan, Hanwen Yu, Xichuan Zhang, Yiying Li
개요
저조도 영상은 컴퓨터 비전 분야에서 조명 저하로 인해 여전히 해결해야 할 과제이며, 탐지 및 분할과 같은 다운스트림 작업의 성능에 영향을 미친다. 이 논문에서는 저조도 영상 형성을 재고하고 고전적인 람베르트 모델을 확장하여 저조도 조건을 더 잘 특성화한다. 주파수 영역 분석을 통해 주파수 영역 채널 비율을 활용하여 구조화된 필터링 프로세스를 통해 조명 불변 특징을 추출할 수 있음을 이론적으로 증명한다. FRBNet (Frequency-domain Radial Basis Net)이라는 새로운 end-to-end 학습 가능한 모듈을 제안하며, 이는 주파수 영역 채널 비율 연산과 학습 가능한 주파수 영역 필터를 통합하여 전반적인 조명 불변 특징 향상을 이룬다. FRBNet은 플러그 앤 플레이 모듈로 기존 네트워크에 통합되어 다운스트림 작업의 손실 함수를 수정하지 않고도 사용할 수 있다. 다양한 다운스트림 작업에 대한 광범위한 실험을 통해 FRBNet이 어두운 객체 감지에 대해 +2.2 mAP, 야간 분할에 대해 +2.9 mIoU를 포함하여 뛰어난 성능을 달성함을 입증했다.
시사점, 한계점
•
FRBNet은 저조도 환경에서 조명 불변 특징을 효과적으로 추출하는 새로운 모듈을 제시한다.