Apolline Wasik et Léo Gammel de l' équipe Just Dance du studio Ubisoft Paris vous en disent plus sur le développement de la fonctionnalité Caméra disponible en version bêta dans Just Dance 2025 Edition, et officiellement lancée cette année avec l'édition 2026 du jeu.

Du Kinect à la fonctionnalité Caméra : une nouvelle ère de reconnaissance de mouvements

Cela fait des années que notre communauté Just Dance nous demande une alternative au Kinect dans nos futures éditions. En effet, de nombreux fans réclamaient une reconnaissance complète des mouvements du corps afin d'améliorer la précision de leurs performances. Fin 2021, Xbox a mis fin au support du Kinect. C'est à ce moment-là que nous avons commencé à imaginer un nouveau système basé sur les caméras de smartphones. Après un an et demi de recherche et de développement intensifs, la V1 de la fonctionnalité Caméra est désormais prête à être pleinement exploitée dans les prochaines éditions Just Dance... et au-delà.

Comment ça marche : quand l'apprentissage profond rencontre la danse

Comparé à l'ancien système de score par caméra (principalement basé sur le Kinect), le nouveau mode Caméra utilise un modèle d'apprentissage profond (ou Deep Learning) existant*. Ce modèle détermine les mouvements du joueur sous la forme d'un squelette en 3 dimensions, les compare aux mouvements du coach en jeu, puis génère un score. Toutes les données (distance, angles, orientations, et mesures des mouvements) entre le joueur et le jeu sont analysées par notre algorithme de comparaison fondé sur l'apprentissage automatique (ou Machine Learning).  Cela permet un score précis de l'ensemble du corps, plutôt que de ne suivre que la main droite comme c'était le cas avec l'ancien système de détection de mouvements.**

De plus, cette nouvelle solution, qui repose sur les caméras des smartphones, est totalement indépendante de toute console. Elle nous permet ainsi de proposer cette fonctionnalité simultanément sur PS5 et Xbox, ainsi que, pour la première fois, sur Switch et Switch 2.

Un algorithme d'apprentissage automatique unique

L'algorithme d'apprentissage automatique, au cœur de la fonctionnalité Caméra, a été conçu par l'équipe de production Just Dance composée de Data Scientists, Score Level Designers et Gameplay Programmers. Il repose sur la collecte de données, l'annotation et la reconnaissance de mouvements. Pour commencer, un algorithme d'apprentissage automatique a été entraîné avec des données internes. Ces données ont ensuite été vérifiées et annotées par l'équipe de Score Level Design, avec un contrôle qualité assuré par l'équipe de Data Science. L'algorithme a ensuite été intégré au jeu grâce à nos Gameplay Programmers.

Le processus complet de développement a commencé fin 2023. Au total, 9 000 mouvements ont été enregistrés, 6 000 d'entre eux ont été utilisés pour entraîner l'algorithme et les 3 000 restants ont été utilisés pour les tests. Nous avons atteint un taux de réussite de 80 % lors des tests, tandis que les 20 % restants ont été équilibrés et ajustés manuellement par les Score Level Designers.

En décembre 2023, nous avons sorti une phase bêta pour que notre communauté puisse partager ses premiers retours qualitatifs sur la fonctionnalité et la sensation de score. Globalement, les retours ont été très positifs, et les joueurs ont apprécié la progression dans la prise en main du système.

Une fonctionnalité sans équivalent sur le marché actuel

Le nouveau mode Caméra intègre efficacement la reconnaissance de mouvements dans le jeu grâce à une solution basée sur les données, qui offre des résultats précis. C'est pour cela que la fonctionnalité Caméra se démarque dans le secteur technologique.

Depuis le début de l'année 2025, nous avons ajouté un grand nombre de cartes compatibles avec cette fonctionnalité, avec un système de score plus cohérent et stable sur différents appareils. Nous avons apporté de nombreuses améliorations techniques cette année pour garantir une meilleure réactivité et fiabilité du système de score, avec une évaluation plus détaillée de la chorégraphie. En effet, grâce à nos nouveaux outils sur mesure, nous disposons désormais d'un meilleur contrôle sur la solution, et de plus de liberté sur l'équilibrage des scores, afin d'offrir la meilleure expérience Just Dance possible à nos joueurs.

L'avenir du système de score via la fonctionnalité Caméra

Nous pensons que cette fonctionnalité de score propriétaire apportera une grande valeur à l'avenir de notre franchise, avec encore plus de gameplay compatible à venir.  Nous sommes très fiers des retours positifs de notre communauté, et nous continuerons à suivre attentivement vos commentaires pour améliorer encore davantage cette fonctionnalité.

*Un modèle d'apprentissage profond est un type de système d'intelligence artificielle qui utilise plusieurs couches de réseaux neuronaux qui apprennent et prennent des décisions à partir d'une grande quantité de données.

**Trois options de score dans Just Dance 2026 Edition selon votre appareil : manettes Switch exclusivement sur Switch et Switch 2, manette de détection de mouvements & mode Caméra via l'appli Just Dance Controller disponibles pour tous les joueurs.

Rencontrez les intervenants :

Apolline Wasik* est Data Scientist spécialisée dans la vision par ordinateur chez Ubisoft. Elle a travaillé sur la R&D et la production de la fonctionnalité Caméra dans Just Dance 2026 Edition, plus particulièrement sur le traitement algorithmique des données.*

Léo Gammel** est Score Level Designer chez Ubisoft. Il a travaillé sur la R&D et la production de la fonctionnalité Caméra dans Just Dance 2026 Edition, plus particulièrement sur la fiabilité du système de score et la production de contenu.*

Qu'est-ce que la fonctionnalité Caméra ?

*Le mode Caméra est une fonctionnalité de Just Dance qui permet aux joueurs d'utiliser la caméra de leur téléphone comme outil de reconnaissance des mouvements du corps entier, pour atteindre un niveau de précision plus élevé en dansant. Comment ça marche ? La caméra du téléphone détecte les mouvements du joueur, qui sont ensuite comparés à la chorégraphie du coach à l'écran. Plus les mouvements du joueur correspondent à ceux du coach, plus le score est élevé.  Cette fonctionnalité est réservée aux joueurs en solo et est disponible via l'application Just Dance Controller pour Just Dance 2025. Après avoir été testée en bêta dans Just Dance 2025 Edition, la fonctionnalité Caméra est maintenant officiellement lancée dans Just Dance 2026 Edition et propose aux joueurs une expérience mains libres sur Just Dance. *