Dans un contexte de débat sur l’IA générative, Microsoft dévoile Muse, un modèle innovant destiné à optimiser le développement des jeux vidéo. Cette technologie promet de conserver la cohérence des éléments tout en intégrant les retours des joueurs, redéfinissant ainsi la manière dont les concepteurs abordent la création interactive.
Microsoft a récemment présenté Muse, un modèle d’IA générative conçu pour extrapoler des scénarios de jeux vidéo interactifs à partir d’images, de clips et d’entrées enregistrées de joueurs. Cet outil vise à simplifier le développement des jeux tout en respectant des pratiques d’entraînement éthiques. Les poids, les données d’exemple et l’interface interactive pour Muse, que Microsoft appelle un « modèle d’action de monde et humaine« , sont désormais disponibles sur Azure AI Foundry. Les développeurs ont partagé des détails sur la technologie sur le blog de recherche de l’entreprise et dans une étude récemment publiée dans Nature.
Après avoir été formé sur un million de mises à jour, Muse peut prédire fidèlement jusqu’à trente secondes de jeu en se basant sur une seconde de séquence réelle et neuf secondes d’entrées de joueurs. Contrairement aux modèles précédents, où les détails du jeu disparaissent ou se déforment dès qu’ils quittent le cadre visible, Muse conserve des informations telles que les terrains, les personnages et les mécaniques de jeu.
Dans une interview vidéo avec Phil Spencer, responsable de Xbox, Dom Matthews de Ninja Theory a expliqué que la société ne prévoit pas d’utiliser Muse pour créer du contenu destiné aux utilisateurs finaux. Au lieu de cela, le studio envisage de l’utiliser pour aider à rédiger et faire évoluer des idées en générant rapidement des aperçus d’une vision cohérente. Il reste incertain si d’autres développeurs adopteront une philosophie similaire, mais Microsoft ne compte pas imposer l’utilisation de ses modèles à ses studios.
Certaines voix parmi les développeurs se sont aussitôt exprimées contre l’idée. David Goldfarb, ayant travaillé sur Battlefield, Mass Effect et Killzone, a répondu de manière brève et désinvolte. Marc Burrage de Creative Assembly a déclaré à Wired que même restreindre l’IA générative à la phase de prototypage pourrait nuire au développement des jeux en privant les employés d’une expérience pratique.
Spencer a émis l’hypothèse de manière optimiste que des technologies comme Muse pourraient faciliter la préservation des jeux en aidant les développeurs à adapter des titres anciens sur des appareils modernes. Microsoft a souvent promis de préserver la bibliothèque numérique de ses clients à travers les générations de hardware, mais il reste à voir si les résultats de régénération avec l’IA pourront être satisfaisants. Frank Cifaldi de la Video Game History Foundation n’est pas aussi optimiste, comparant l’idée à une photocopie d’une peinture.
Microsoft a également été fortement critiqué concernant les données d’entraînement de Muse. Une partie de la controverse entourant les modèles d’IA provient du fait que des entreprises utilisent du hardware provenant d’internet sans le consentement des créateurs originaux. Microsoft a contourné le problème en formant Muse sur des jeux dont elle possède déjà les droits.
La démonstration initiale a utilisé des données de télémétrie de joueurs du jeu multijoueur de Ninja Theory, Bleeding Edge. Les utilisateurs ayant consenti à l’EULA du jeu ont déjà accepté d’aider à former Muse. Théoriquement, l’entreprise pourrait élargir cette pratique à des titres populaires tels que Minecraft, Call of Duty, Halo, Overwatch, StarCraft, Doom ou Forza.