[공지사항]을 빙자한 안부와 근황 
Show more

Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

ConformalSAM: Desbloqueo del potencial de los modelos de segmentación fundamentales en la segmentación semántica semisupervisada con predicción conforme

Created by
  • Haebom

Autor

Danhui Chen, Ziquan Liu, Chuxi Yang, Dan Wang, Yan Yan, Yi Xu, Xiangyang Ji

Describir

En este artículo, proponemos una técnica de segmentación semántica semisupervisada (SSSS) que utiliza un modelo de segmentación base para abordar la falta de etiquetas en tareas de visión a nivel de píxel (p. ej., segmentación semántica), donde es difícil obtener datos de anotación de alta calidad. En particular, utilizamos SEEM, una variante del Modelo de Segmentación de Cualquier Cosa (SAM) optimizada para entradas de texto, para generar máscaras de predicción para datos sin etiquetar. Para abordar las deficiencias de las máscaras generadas por SEEM, proponemos un nuevo marco SSSS denominado ConformalSAM, que calibra el modelo base utilizando datos etiquetados del dominio objetivo y filtra las etiquetas de píxel poco fiables para utilizar únicamente etiquetas de alta confianza para el aprendizaje supervisado. Específicamente, utilizamos la Predicción Conformal (CP) para adaptar el modelo base a los datos objetivo y empleamos una estrategia de aprendizaje autodependiente que aprovecha el excelente rendimiento del modelo base en la fase inicial de aprendizaje y mitiga el sobreajuste de las máscaras generadas por SEEM en la fase posterior. Los resultados experimentales muestran que ConformalSAM supera a los métodos SSSS recientes en tres pruebas de referencia SSSS estándar y, además, puede contribuir a mejorar el rendimiento de otros métodos como complemento.

Takeaways, Limitations

Takeaways:
Un nuevo método para mejorar la eficiencia del aprendizaje semisupervisado utilizando el modelo de segmentación básica (SEEM).
Aumente la confiabilidad del modelo base y resuelva el problema de sobreajuste mediante la predicción conforme.
Se puede aplicar como complemento a varios métodos SSSS y contribuye a la mejora del rendimiento.
Contribuye a aliviar la dificultad de obtener datos de anotación de alta calidad.
Limitations:
El rendimiento del método propuesto puede depender del rendimiento de SEEM.
Se necesita más investigación sobre el rendimiento de generalización de los modelos específicos del dominio.
La predicción conforme puede ser computacionalmente costosa.
Se necesitan experimentos adicionales en diferentes conjuntos de datos y tareas.
👍