Un nouveau modèle d’IA générative, Muse, développé par Microsoft, pourrait transformer le développement de jeux vidéo en permettant de prédire des séquences de gameplay à partir d’images et d’entrées de joueurs. Même si certains développeurs sont sceptiques, cette innovation suscite des débats sur l’avenir du secteur et l’éthique de l’utilisation de l’IA.
Les chercheurs de Microsoft ont récemment présenté Muse, un modèle d’IA générative conçu pour extrapoler des scénarios de jeux vidéo interactifs à partir d’images, de clips et d’entrées de joueurs enregistrées. Cet outil vise à simplifier le développement des jeux tout en respectant des pratiques de formation éthiques. Les poids, les données exemples et l’interface interactive de Muse, que Microsoft désigne sous le nom de « Modèle d’Action Mondiale et Humaine », sont désormais disponibles sur Azure AI Foundry. Les développeurs ont discuté des détails de la technologie sur le blog de recherche de l’entreprise et dans une étude récemment publiée dans Nature.
Après avoir été formé sur un million de mises à jour, Muse peut prévoir fidèlement jusqu’à une minute de gameplay à partir d’une seconde de vidéos réelles et de neuf secondes d’entrée de joueur. Contrairement aux modèles précédents, où les détails du gameplay disparaissent ou se déforment dès qu’ils quittent le cadre visible, Muse retient des détails tels que le terrain, les personnages et les mécaniques de jeu.
Dans une interview vidéo avec Phil Spencer, le responsable d’Xbox, Dom Matthews de Ninja Theory a expliqué que l’entreprise ne prévoit pas d’utiliser Muse pour créer du contenu destiné aux utilisateurs finaux. Au lieu de cela, le studio entend l’utiliser pour aider à élaborer et à itérer des idées en générant rapidement des instantanés d’une vision cohérente. Il reste incertain si d’autres développeurs suivront une philosophie similaire, mais Microsoft n’imposera pas l’utilisation de ses modèles dans ses studios.
Certaines opinions parmi les développeurs se sont manifestées dès le début. David Goldfarb, ayant travaillé sur Battlefield, Mass Effect et Killzone, a offert une réponse brève et désinvolte. Marc Burrage de Creative Assembly a confié à Wired que même restreindre l’IA générative à la phase de prototypage pouvait nuire au développement des jeux en privant les employés d’expérience pratique.
Spencer a spéculé de manière optimiste que des technologies comme Muse pourraient faciliter la préservation des jeux en aidant les développeurs à porter des titres plus anciens sur des appareils modernes. Microsoft a souvent promis de préserver les bibliothèques numériques de ses clients à travers les générations de hardware, mais il reste à voir si les régénérations à l’aide de l’IA produiront des résultats satisfaisants. Frank Cifaldi de la Video Game History Foundation n’est pas aussi optimiste, comparant l’idée à une photocopie d’une peinture.
Microsoft a également été sévèrement critiqué concernant les données de formation de Muse. Une grande partie de la controverse à laquelle font face les modèles d’IA découle des entreprises utilisant des matériaux provenant d’internet sans le consentement des créateurs originaux. Microsoft a contourné la question en formant Muse sur des jeux qu’il possède déjà.
La démonstration initiale a utilisé des données de télémétrie de joueurs de Bleeding Edge, un tireur multijoueur de Ninja Theory. Les utilisateurs qui ont accepté l’EULA du jeu ont déjà consenti à aider à former Muse. Théoriquement, l’entreprise pourrait étendre cette pratique à des titres populaires comme Minecraft, Call of Duty, Halo, Overwatch, StarCraft, Doom ou Forza.