Daily Arxiv

Cette page résume et organise les publications en intelligence artificielle du monde entier.
Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif.
Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.

Exploiter les images non étiquetées hors distribution : segmentation sémantique semi-supervisée avec un modèle à vocabulaire ouvert

Created by
  • Haebom

Auteur

Wooseok Shin, Jisu Kang, Hyeonki Jeong, Jin Sob Kim, Sung Won Han

Contour

Cet article propose SemiOVS, un cadre de segmentation sémantique basé sur l'apprentissage semi-supervisé, qui exploite des données étiquetées limitées et d'abondantes données non étiquetées hors distribution (OOD). Si des études antérieures ont montré des résultats prometteurs avec une segmentation limitée d'ensembles de données standard, le potentiel d'exploitation d'images non étiquetées à grande échelle n'a pas été exploré. SemiOVS utilise le modèle de segmentation à vocabulaire ouvert (OVS) pour générer des pseudo-étiquettes très précises pour les images OOD. Les résultats expérimentaux sur les ensembles de données Pascal VOC et Context démontrent que l'exploitation d'images non étiquetées supplémentaires dans un environnement contraint par les étiquettes améliore les performances, en particulier lors de l'exploitation d'images OOD via le modèle OVS. SemiOVS atteint des performances de pointe, surpassant les méthodes existantes PrevMatch et SemiVL de respectivement +3,5 mIoU et +3,0 mIoU.

Takeaways, Limitations_

Takeaways:
Démonstration expérimentale de l'efficacité de l'exploitation d'images riches non étiquetées dans un environnement de données d'étiquettes limité.
Un nouveau cadre d'apprentissage semi-supervisé basé sur le modèle OVS pour utiliser efficacement les images OOD est présenté.
Atteindre des performances de pointe en améliorant les performances de segmentation sémantique par rapport aux méthodes existantes.
Suggérant le potentiel d’utilisation de données non étiquetées à grande échelle dans des applications du monde réel.
Limitations:
Des recherches supplémentaires sont nécessaires sur les performances de généralisation de la méthode présentée dans cet article.
Une évaluation de la robustesse de diverses distributions de données OOD est nécessaire.
Il est nécessaire de vérifier la généralisabilité des résultats expérimentaux limités à un ensemble de données spécifique.
👍