Daily Arxiv

Cette page résume et organise les publications en intelligence artificielle du monde entier.
Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif.
Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.

MimicMotion : Génération de vidéos de mouvements humains de haute qualité avec guidage de pose fiable

Created by
  • Haebom

Auteur

Yuang Zhang, Jiaxi Gu, Li-Wen Wang, Han Wang, Junqi Cheng, Yuefeng Zhu, Fangyuan Zou

Contour

Dans cet article, nous proposons MimicMotion, un framework de génération vidéo contrôlable de haute qualité. Pour surmonter les limites des techniques de génération vidéo existantes, telles que la contrôlabilité, la longueur des vidéos et le manque de détails, MimicMotion génère des vidéos de haute qualité de longueur arbitraire en imitant des guides de mouvement spécifiques. Grâce à un guidage de pose basé sur la confiance, à une amplification des pertes locales basée sur la confiance des poses et à des stratégies de fusion latente progressive, il permet d'obtenir une qualité d'image élevée, une fluidité temporelle, une distorsion d'image réduite et une génération vidéo efficace à long terme. Grâce à des expérimentations et des études utilisateurs, nous démontrons des performances améliorées par rapport aux méthodes existantes. Les résultats détaillés sont disponibles sur la page du projet ( https://tencent.github.io/MimicMotion ).

Takeaways, Limitations_

Takeaways:
Contribuer au développement d’une technologie de génération de vidéos de longueur arbitraire contrôlables et de haute qualité.
Amélioration de la qualité de l'image grâce à un guidage de pose basé sur la confiance et à une amplification des pertes locales.
Augmenter l'efficacité de la génération vidéo à long terme grâce à des stratégies de fusion latente progressive.
Développer le potentiel des technologies de création vidéo dans une gamme d’applications.
Limitations:
L'article ne fait pas spécifiquement référence à __T312358_____. Une analyse plus approfondie des limites de performance et des axes d'amélioration de MimicMotion est nécessaire dans le cadre de recherches futures.
Les résultats sur la page du projet nécessitent une validation.
Une évaluation des performances de généralisation pour différents types de guidage de mouvement est nécessaire.
👍