Le réalisateur Paul Trillo a utilisé l’intelligence artificielle Sora d’OpenAI pour créer une vidéo pour le nouveau single de Washed Out. Il a généré 700 clips avec l’IA et en a sélectionné 55 pour réaliser The Hardest Part.
C’est lysergique, émouvant, nostalgique et artificiel. Le nouveau clip vidéo de The Hardest Part, le single d’Ernest Weatherly Greene, connu sous le nom de Washed Out, a été réalisé avec Sora, le nouveau logiciel d’OpenAI capable de créer des vidéos à partir d’une chaîne de mots. La vidéo est un plan séquence forcé qui suit la vie d’un couple, de l’enfance à l’âge adulte. « Ne pleure pas, tout va bien maintenant », chante Greene. « La partie la plus difficile est que tu ne peux pas revenir en arrière. »
En regardant la vidéo, on a l’impression de mettre la tête dans un long tube avec une perspective à la première personne. Le réalisateur, Paul Trillo (qui a eu un accès anticipé à Sora), a déclaré qu’il voulait filmer un « genre de zoom infini » depuis au moins 10 ans, « j’avais abandonné, je pensais que c’était une entreprise trop ambitieuse ». Puis Sora est arrivé.
« Il offre quelque chose qui ne pourrait pas être capturé avec une caméra, ni animé en 3D, c’était quelque chose qui aurait pu exister uniquement avec cette technologie spécifique », explique Trillo. « Les aspects surréels et hallucinatoires de l’intelligence artificielle vous permettent d’explorer et de découvrir de nouvelles idées que vous n’auriez jamais imaginées. »
Comment la vidéo a été réalisée
En six semaines, Trillo a monté ensemble 55 clips, qui ont été sélectionnés parmi les 700 de départ. « The Hardest Part« , le premier single du prochain album de Washed Out, « Notes From a Quiet Life », est la vidéo musicale la plus longue réalisée avec Sora jusqu’à présent. Elle est lysergique, parfois inquiétante et exploite les hallucinations de la machine pour créer un univers vraisemblable mais qui survit ailleurs.
« Je n’étais pas intéressé par la capture du réalisme, mais par quelque chose qui semblait hyper réel. La fusion fluide de différentes scènes ressemble davantage à la façon dont nous nous déplaçons à travers les rêves et les souvenirs sombres« , explique Trillo. « Alors que certaines personnes pensent que cela pourrait remplacer la façon dont les choses sont réalisées, je le vois comme une intégration d’idées qui n’auraient jamais pu être réalisées autrement ».
Les peurs liées à l’intelligence artificielle
D’un côté, il y a ceux qui craignent la « démocratisation » de l’art, maintenant qu’il suffit d’un clic pour réaliser des œuvres artistiques, de l’autre côté il y a le problème des droits d’auteur. C’est un sujet ouvert. L’accusation est d’exploiter les œuvres des artistes, sans leur permission et sans leur donner une part des bénéfices, pour entraîner les générateurs d’images et de vidéos. Dès le début, en effet, des images trop semblables, des copies maladroites du travail d’autres artistes, ont été exposées dans les vitrines de l’IA générative, des œuvres jetées dans les générateurs sans le consentement de ceux qui les ont créées.
L’affaire de Greg Rutkowski a été emblématique. Il est un artiste conceptuel, célèbre pour ses œuvres de style fantastique, et a été mentionné des centaines de milliers de fois dans les instructions de Midjourney. Selon le site Lexica, qui suit plus de 10 millions d’images et de suggestions générées par Stable Diffusion, le nom de Rutkowski a été utilisé 93 000 fois.
Les changements avec les vidéos créées par Sora
« Ce que Trillo a inventé est nostalgique, triste et assez étrange. Cependant, cela réussit quand même à vous faire ressentir des sentiments pour les personnages », écrit Greene. « Selon moi, la qualité hallucinatoire des clips de Sora semble être le début d’un nouveau genre en soi, qui est surréaliste, imprévisible et tout à fait unique par communiqué au cinéma traditionnel ou même à l’animation. » Il sera également possible d’économiser sur le budget total d’un projet.
De plus, selon Trillo, l’intelligence artificielle sera une ressource et ouvrira de nouvelles solutions technologiques et créatives pour les artistes. « Cela offre un aperçu d’un avenir où les artistes musicaux auront la possibilité de rêver en grand« , écrit-il. « Il est important de ne pas l’utiliser comme une nouvelle norme de création, mais comme une autre technique qui s’ajoute à l’éventail des outils. »