본 논문은 단일 이미지 반사 제거에서 듀얼 스트림 아키텍처의 성능 향상을 위한 두 가지 개선 사항을 제시합니다. 첫째, 잔차 레이어에서 추출된 저주파 성분과 투과 레이어 간의 상호 작용을 강화하는 새로운 계층 간 상보성 모델을 제안합니다. 잔차 레이어의 고주파 성분은 두 스트림에 역 변조를 제공하여 투과 레이어의 디테일 품질을 향상시킵니다. 둘째, 계층 간 상보 구조를 갖는 재구성된 스트림을 얻기 위해 채널 수준에서 듀얼 스트림을 재구성하고, 재구성된 스트림에 대한 어텐션 계산을 수행하여 계층 간 분리를 향상시키는 효율적인 계층 간 상보성 어텐션 메커니즘을 제안합니다. 실험 결과, 제안된 방법은 여러 공개 데이터셋에서 최첨단 분리 품질을 달성하는 동시에 계산 비용과 모델 복잡성을 크게 줄이는 것을 보여줍니다.
시사점, 한계점
•
시사점:
◦
듀얼 스트림 아키텍처의 계층 간 상보성을 효과적으로 활용하여 단일 이미지 반사 제거 성능을 향상시켰습니다.
◦
제안된 방법은 계산 비용과 모델 복잡성을 감소시키면서 최첨단 성능을 달성했습니다.
◦
저주파 및 고주파 성분을 활용한 상호 작용 모델과 효율적인 어텐션 메커니즘은 향후 연구에 대한 새로운 방향을 제시합니다.