[공지사항]을 빙자한 안부와 근황 
Show more

Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

Alinea tu ritmo: Genera poses de baile altamente alineadas con representación de características con reconocimiento del ritmo y mejoradas mediante puertas

Created by
  • Haebom

Autor

Congyi Fan, Jian Guan, Xuanjia Zhao, Dongli Xu, Youtian Lin, Tong Ye, Pengming Feng, Haiwei Pan

Describir

En este artículo, proponemos Danceba, un novedoso marco para la generación automática de movimientos de danza humana naturales, diversos y rítmicos con música. Para abordar las limitaciones de los métodos existentes, como la falta de alineación rítmica y la dinámica de movimiento poco natural, Danceba mejora la representación de las características de reconocimiento rítmico mediante un mecanismo de compuertas. En concreto, proponemos la Extracción de Ritmo Basada en Fases (PRE), que extrae con precisión la información rítmica de los datos de fase de la música, y la Atención Causal Temporal-Gated (TGCA), que se centra en las características rítmicas globales para garantizar que los movimientos de danza sigan el ritmo musical con precisión. Además, mejoramos la naturalidad y la diversidad de los movimientos de danza generados mediante la arquitectura de Modelado de Movimiento Paralelo Mamba (PMMM), que modela por separado los movimientos del tren superior e inferior del cuerpo junto con las características musicales. Los resultados experimentales muestran que Danceba supera significativamente a los métodos de vanguardia existentes en cuanto a alineación rítmica y diversidad de movimientos.

Takeaways, Limitations

Takeaways:
Se presenta un nuevo marco que supera las limitaciones de los métodos existentes en el campo de la generación de movimientos de danza con música.
Propuestas de tecnología innovadora como la extracción de ritmo basada en fases (PRE), la atención causal temporal (TGCA) y el modelado de movimiento paralelo Mamba (PMMM)
Cree movimientos de baile más naturales y realistas a través de una mejor alineación del ritmo y variedad de movimientos.
Sugiere posibles aplicaciones en diversos campos como la realidad virtual y la industria cinematográfica.
Limitations:
Se necesita más investigación sobre el rendimiento de generalización del método propuesto.
Necesidad de verificar la escalabilidad a varios géneros musicales y estilos de baile.
Necesidad de un mejor análisis comparativo cuantitativo con movimientos de danza humanos reales
Necesidad de análisis del coste computacional y la eficiencia temporal
👍