Apolline Wasik y Léo Gammel, del equipo de Just Dance de Ubisoft Paris, nos hablan sobre el desarrollo de la función Mando-cámara, que estuvo disponible en la beta de Just Dance 2025 Edition y que se publica oficialmente este año con Just Dance 2026 Edition.

De Kinect a la cámara: una nueva era de reconocimiento de movimiento

La comunidad de Just Dance llevaba años pidiéndonos una alternativa a Kinect. De hecho, muchos de nuestros seguidores más fieles querían que el juego siguiera los movimientos de todo el cuerpo para aumentar la precisión de sus pasos de baile. Cuando Xbox dejó de dar soporte a Kinect a finales de 2021, empezamos a pensar en un nuevo sistema que utilizara la cámara del teléfono móvil. Tras un año y medio de investigación y desarrollo a tiempo completo, la función Mando-cámara ya está lista en su versión V1 y se implementará completamente en las futuras ediciones de Just Dance.

Cómo funciona: El aprendizaje profundo se une al baile

A diferencia del antiguo sistema de puntuación por cámara (basado principalmente en Kinect), el nuevo Mando-cámara utiliza un modelo de aprendizaje profundo*. Calcula los movimientos del jugador en forma de esqueleto tridimensional, los compara con los movimientos del profe y genera una puntuación. Todos los datos (mediciones de distancia, ángulos, orientaciones y movimientos) entre los jugadores y el juego pasan por un algoritmo de comparación basado en el aprendizaje automático.  Esto permite una puntuación precisa de todo el cuerpo, y no solo de la mano derecha, gracias al nuevo mando de movimiento**.

El hecho de que esta nueva solución basada en la cámara del teléfono móvil sea independiente de cualquier consola nos permite lanzarla simultáneamente en PS5 y Xbox, y por primera vez también en Switch y Switch 2.

Un algoritmo de aprendizaje automático único

El algoritmo de aprendizaje automático, que constituye el núcleo de la función Mando-cámara, ha sido desarrollado por el equipo de producción de Just Dance, formado por científicos de datos, diseñadores de niveles de puntuación y programadores de mecánicas de juego. Se basa en sistemas de recopilación de datos, etiquetado y reconocimiento de movimientos. Como punto de partida, entrenamos un algoritmo de aprendizaje automático utilizando datos internos. Después, el equipo de diseño de niveles de puntuación verificó y etiquetó estos datos y el equipo de ciencia de datos realizó un seguimiento de la calidad. Finalmente, los programadores de mecánicas de juego implementaron el algoritmo de aprendizaje automático en el juego.

El proceso de desarrollo comenzó a finales de 2023. Registramos un total de 9000 movimientos y, de estos, utilizamos 6000 para entrenar el algoritmo y 3000 para probarlo. La tasa de éxito fue del 80 % en las pruebas de datos y los diseñadores de niveles de puntuación equilibraron y ajustaron manualmente el 20 % restante.

En diciembre de 2023 lanzamos una fase beta para que la comunidad pudiera compartir sus primeras impresiones sobre está función y las puntuaciones. En general, las opiniones fueron muy positivas y los jugadores observaron un gran progreso en la curva de aprendizaje.

Una función sin igual en el mercado

El nuevo Mando-cámara integra el reconocimiento de movimiento en el juego de forma eficiente gracias a una solución basada en datos que permite obtener resultados de puntuación precisos. Esto hace que el Mando-cámara destaque en la industria tecnológica.

Desde 2025 contamos con más coreografías compatibles con esta función, que presentan puntuaciones más coherentes y estables entre los distintos dispositivos. Este año hemos realizado mejoras técnicas que mejoran la capacidad de respuesta y la fiabilidad de las puntuaciones al evaluar las coreografías de forma más detallada. Gracias a las nuevas herramientas personalizadas, ahora tenemos un mayor control sobre la solución, lo que nos concede libertad a la hora de equilibrar las puntuaciones y ofrecer la mejor experiencia de Just Dance a nuestros jugadores.

¿Qué le depara el futuro a la puntuación por cámara?

Creemos que esta función de puntuación patentada aportará un gran valor a nuestra propiedad intelectual y contribuirá a ofrecer mecánicas de juego más compatibles.  Estamos muy orgullosos de ver una respuesta tan positiva en nuestra comunidad y seguiremos atentos a vuestros comentarios para seguir mejorando esta función.

*Un modelo de aprendizaje profundo es un tipo de sistema de inteligencia artificial que utiliza múltiples capas de redes neuronales para aprender y tomar decisiones a partir de grandes cantidades de datos.

**Just Dance 2026 Edition ofrece tres opciones de puntuación distintas en función del dispositivo: mandos de Switch exclusivos para Switch y Switch 2, mando de movimiento portátil y Mando-cámara a través de la aplicación Just Dance Controller, disponible para todos los jugadores.

Conoce a los ponentes:

Apolline Wasik* es científica de datos en Ubisoft y está especializada en visión artificial. Ha trabajado en la I+D y la producción de la función Mando-cámara de Just Dance 2026 Edition, centrándose en el procesamiento algorítmico de los datos.*

Léo Gammel* es diseñador de niveles de puntuación en Ubisoft. Ha trabajado en la I+D y en la producción de la función Mando-cámara de Just Dance 2026 Edition, centrándose en la fiabilidad de la puntuación y la producción de contenidos.*

¿Qué es la función Mando-cámara?

El modo Mando-cámara es una función de Just Dance que permite a los jugadores convertir la cámara del teléfono en una herramienta de reconocimiento de todo el cuerpo y así alcanzar mayores niveles de precisión al bailar. ¿Cómo funciona? La cámara del teléfono detecta los movimientos del jugador y estos se comparan con la coreografía del profe en pantalla. Cuanto más similares sean, mayor será la puntuación.  Esta función solo está disponible para el juego en solitario y en la aplicación Just Dance 2025 Controller. Tras haberla probado en la versión beta de Just Dance 2025 Edition, la función Mando-cámara se publica oficialmente en Just Dance 2026 Edition para que los jugadores puedan disfrutar de Just Dance con las manos libres.