Aprende a bailar con inteligencia artificial

Cuando hablamos de inteligencia artificial estamos hablando de una categoría muy amplia en la que se puede aplicar. Es difícil imaginar que no importa.

Hoy vamos a ver y bailar esto, un lenguaje universal que se encuentra en casi todas las culturas, patrones de movimiento que responden al ritmo de la música y lugares donde la inteligencia artificial puede ayudar inmensamente.

Bailar en muchos casos requiere práctica y formación profesional, por lo que es difícil imaginar un modelo de aprendizaje automático específico para este tema.

De hecho, Google aceptó Coreógrafo de inteligencia artificialUn modelo que puede imitar y comprender los movimientos de baile puede incluso mejorar las habilidades coreográficas de una persona.

Google anunció el modelo y lanzó un conjunto Datos de movimiento de danza multimodal 3D A gran escala, más de 5 horas de movimientos de baile en 3D, 1408 secuencias que cubren 10 géneros de baile.

Un registro llamado AIST ++También contiene de Sincronizar imagen Desde diferentes perspectivas, diferentes estudios como la evaluación de posturas 2D y 3D son el objetivo.

En un blog de Google, comentaron los detalles técnicos de cómo lograron este objetivo:

El modelo usa inicialmente transformadores de movimiento y audio separados para codificar el movimiento original y la entrada de audio. Las pestañas se insertan y se envían a un transformador transmodal, que aprende la correspondencia entre las dos modalidades y genera N movimientos futuros. Estas secuencias se utilizan luego para entrenar el modelo en sí.

El modelo puede generar movimientos de baile fotograma a fotograma.

Lo que es impresionante es cómo el modelo comprende la relación entre el sonido y el movimiento para crear una secuencia tridimensional de movimientos impulsada por la música. A través de esta tecnología, uno puede practicar y crear nuevos pasos y crear programas que pueden usar esta inteligencia para satisfacer diferentes necesidades. Puede encontrar el código en GitHub y el modelo entrenado en este enlace.