Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

¿Están los modelos de Vision Foundation preparados para el registro de imágenes médicas listas para usar?

Created by
  • Haebom

Autor

Hanxue Gu, Yaqian Chen, Nicholas Konz, Qihang Li y Maciej A. Mazurowski

Describir

Este artículo evalúa el rendimiento del registro de imágenes de resonancia magnética mamaria utilizando un modelo base preentrenado en un conjunto de datos de imágenes a gran escala. A diferencia de estudios previos dirigidos a cuerpos rígidos o estructuras relativamente simples (p. ej., el cerebro, los órganos abdominales), nos centramos en el registro de imágenes de tejido mamario altamente deformable. Utilizando cinco codificadores preentrenados (Dino-v2, SAM, MedSAM, SSLSAM y MedCLIP), realizamos el registro de imágenes mamarias en diversas condiciones, incluyendo año, secuencia, modalidad y presencia de lesiones, y comparamos su rendimiento. Nuestros resultados muestran que los algoritmos basados en modelos base, como SAM, superan a los algoritmos existentes en el rendimiento general de la alineación mamaria, pero tienen dificultades para alinear las estructuras finas del tejido fibroso. Además, descubrimos que el preentrenamiento adicional o el ajuste fino con imágenes médicas o específicas de la mama no mejoraron el rendimiento y, en algunos casos, de hecho lo redujeron. El código está disponible públicamente.

Takeaways, Limitations

Takeaways:
Demostramos que los algoritmos de registro de imágenes basados en modelos (especialmente SAM) superan a los algoritmos existentes en el rendimiento de alineación general para el registro de imágenes de resonancia magnética de mama.
Las fortalezas del modelo base se hacen más evidentes cuando los cambios de dominio son significativos.
El código abierto facilita una mayor investigación y desarrollo.
Limitations:
El modelo base tiene dificultades para alinear con precisión microestructuras como estructuras similares a fibras.
Es posible que un entrenamiento previo adicional o un ajuste más preciso mediante imágenes médicas o específicas de la mama no mejoren el rendimiento o incluso lo degraden.
Se necesita más investigación sobre el impacto del entrenamiento específico del dominio en el registro de imágenes.
Se necesita más investigación sobre estrategias para mejorar tanto la alineación general como la precisión microestructural.
👍