Less is More? Revisiting the Importance of Frame Rate in Real-Time Zero-Shot Surgical Video Segmentation
Created by
Haebom
Category
Empty
저자
Utku Ozbulak, Seyed Amir Mousavi, Francesca Tozzi, Nikdokht Rashidian, Wouter Willaert, Wesley De Neve, Joris Vankerschaver
개요
본 논문은 AI 수술 보조를 위한 실시간 영상 분할에서 프레임 속도의 영향을 조사합니다. 최첨단 모델인 SAM2를 이용하여 담낭절제술 영상을 대상으로 다양한 프레임 샘플링 속도에서 제로샷 수술 영상 분할의 효과를 평가했습니다. 기존 평가 방식에서는 1초당 1프레임(1 FPS)이 25 FPS보다 성능이 더 나은 것으로 나타났지만, 실시간 스트리밍 시나리오에서는 높은 프레임 속도가 특히 수술 기구와 같이 역동적인 물체에 대해 시간적 일관성과 안정성을 높였습니다. 또한, 전문가들을 대상으로 실시간 수술 영상 분할에 대한 인식 조사를 실시하여 고 FPS 분할 마스크 오버레이에 대한 선호도가 높은 것을 확인했습니다.
시사점, 한계점
•
시사점:
◦
낮은 프레임 속도에서도 기존 평가 지표 상으로는 높은 성능을 달성할 수 있음을 보여줌.
◦
실시간 응용에서는 높은 프레임 속도가 시간적 일관성과 안정성에 필수적임을 강조.
◦
실시간 평가의 중요성과 전문가의 선호도를 고려한 AI 수술 보조 시스템 개발의 필요성 제시.
