Un entrepreneur technologique utilise les images de programmes basés sur l’IA, dont Midjourney, pour débloquer la narration. Nous sommes à l’aube d’une nouvelle ère », dit-il. Les images de ce projet de film de science-fiction proviennent d’images générées par l’IA Image(Salt_Verse)

Imaginez produire votre propre film rempli de décors à gros budget, mais à partir d’un ordinateur. C’est ce que tente de faire un entrepreneur allemand du nom de Fabian Stelzer en utilisant des programmes alimentés par l’IA pour créer les images, les effets sonores et les voix d’un film de science-fiction inspiré des années 70.

Le projet expérimental s’appelle Salt, et il est entièrement construit à partir d’œuvres générées par l’IA. Pour créer les visuels, Fabian Stelzer a exploité des programmes accessibles au public tels que Midjourney, Stable Diffusion et DALL-E 2, qui peuvent essentiellement dessiner tout ce que vous voulez en se basant sur une simple description textuelle de l’utilisateur.

Sur Twitter, Fabian Stelzer a diffusé Salt dans de courts clips, appelés « story seeds ». Comme vous pouvez le voir, le projet de film est un peu comme regarder un documentaire de Ken Burns tournant autour d’images fixes. En effet, l’art généré par l’IA ne peut pas rendre des images en mouvement, du moins pas encore.

Néanmoins, Fabian Stelzer est capable de créer la sensation de mouvement grâce au montage vidéo et même à certains programmes deepfake, qui peuvent faire bouger les visages des personnages. Toutes les voix du film, y compris les voix féminines, proviennent également de Fabian Stelzer, qui a utilisé un générateur de voix IA baptisé Murf pour les créer.

« C’est de l’IA, sauf pour une voix, qui est… la mienne », a déclaré Fabian Stelzer via Twitter.

Fabian, qui a une formation en neurosciences, a déclaré qu’il ne s’était jamais considéré comme un artiste. Mais les progrès croissants des programmes basés sur l’IA montrent que la réalisation de films pourrait un jour être accessible à tous.

« Nous sommes à l’aube d’une nouvelle ère, vraiment », a-t-il déclaré, ajoutant plus tard : « Pour moi, c’est aussi important que l’invention de la photographie, et pour être honnête, peut-être aussi important que l’invention de l’écriture. »

En effet, des programmes tels que Midjourney et DALL-E 2 ont déjà donné à des personnes n’ayant aucune compétence artistique la possibilité de produire rapidement des images que seul un artiste professionnel pourrait créer. Fabian Stelzer a décidé de lancer son projet de film après avoir vu une image générée par l’IA qui ressemblait à un monde de science-fiction mystérieux sorti d’un film des années 1970. « Je devais y aller », a-t-il écrit dans un tweet.

L’expérience de pouvoir « faire naître une bande-annonce » à la volée tout en découvrant moi-même ce monde était incroyablement excitante, un aperçu du futur…

J’ai commencé à me demander ce que les autres pourraient trouver dans cet univers et j’ai organisé des votes communautaires sur Twitter pour le premier « épisode » : https://twitter.com/fabianstelzer/status/1565085323419422721

– fabians.eth (@fabianstelzer) 31 août 2022

Fabian Stelzer a créé diverses scènes pour Salt en utilisant des invites textuelles comme celle-ci : « <DESCRIPTION DE LA SCÈNE>, arrêt sur image d’un film de science-fiction des années 1980, capture d’écran d’un film, photographie, 35 mm, granuleux, distorsion VHS, éclairage cinématographique. » Chaque chapitre de deux minutes qu’il a réalisé jusqu’à présent a pris environ deux heures à créer.

L’histoire de Salt se concentre sur une mystérieuse substance ressemblant à du sel sur une colonie minière. La bande-annonce laisse entendre que cette substance a une origine extraterrestre et un but néfaste.

Cependant, Salt ne sera pas un film traditionnel. Au lieu de cela, Fabian Stelzer laisse le public voter sur la façon dont l’histoire du film se développera après chaque graine de l’histoire. Le chapitre le plus récent demande si l’un des personnages, Sara, doit suivre ses ordres, désobéir ou prendre un petit échantillon de la mystérieuse substance semblable à du sel avant d’expédier les conteneurs. Stelzer envisage de créer plusieurs intrigues pour le film afin de divertir différents groupes.

Je veux absolument avoir une version « Director’s Cut » à un moment donné, ou une version « Community’s Cut », mais le véritable objectif est de transcender le support du film en quelque chose de nouveau », a-t-il déclaré. « Comme permettre à tous les membres de la communauté d’utiliser éventuellement un modèle qui leur permet d’écrire leurs propres scènes. »

L’idée pourrait représenter l’avenir du cinéma. Vous n’aimez pas la fin d’un film ? Eh bien, les technologies de l’IA pourraient vous aider à en créer un nouveau qui correspondrait à vos goûts.

Pour l’instant, il est évident que le processus de création de films de Fabian Stelzer a encore des limites, notamment lorsqu’il s’agit de représenter des personnages en mouvement. Toutefois, il note que les programmes basés sur l’IA s’améliorent rapidement et que ce n’est peut-être qu’une question de temps avant qu’ils ne puissent l’aider à rendre des scènes de films réalistes en mouvement.

« Toutes les grandes choses commencent par des expériences », a-t-il ajouté.

https://www.pcmag.com/news/the-footage-in-this-sci-fi-movie-project-comes-from-ai-generated-images