EndoControlMag: Robust Endoscopic Vascular Motion Magnification with Periodic Reference Resetting and Hierarchical Tissue-aware Dual-Mask Contro
Created by
Haebom
저자
An Wanga, Rulin Zhou, Mengya Xu, Yiru Ye, Longfei Gou, Yiting Chang, Hao Chen, Chwee Ming Lim, Jiankun Wang, Hongliang Ren
개요
EndoControlMag은 내시경 수술 중 미세한 혈관 운동을 시각화하기 위한 훈련이 필요 없는 라그랑주 기반 프레임워크입니다. 복잡하고 역동적인 수술 환경에서의 정확한 수술과 의사결정에 필수적인 혈관 운동의 미세한 변화를 시각화하는 데 중점을 두고 있습니다. 주요 모듈로는 오류 누적을 방지하고 시간적 일관성을 유지하기 위해 동적으로 참조 프레임을 업데이트하는 주기적 참조 재설정(PRR) 기법과, 폐색 및 시야 변화에도 정확한 위치 파악을 유지하기 위해 사전 훈련된 시각 추적 모델을 사용하는 계층적 조직 인식 확대(HTM) 프레임워크가 있습니다. HTM은 운동 기반 소프트닝 또는 거리 기반 지수 감쇠 중 하나의 적응적 소프트닝 전략을 적용하여 다양한 수술 시나리오에 적응합니다. EndoVMM24 데이터셋을 사용하여 다양한 수술 유형과 어려운 시나리오에서 성능을 평가했으며, 기존 방법보다 확대 정확도와 시각적 품질이 우수함을 보였습니다. 코드, 데이터셋 및 비디오 결과는 https://szupc.github.io/EndoControlMag/ 에서 확인할 수 있습니다.