Meta dévoile Movie Gen : une suite de création et de montage vidéo alimentée par l'IA
infohightech ·
Meta a annoncé Movie Gen, un nouveau modèle d'IA capable de générer des vidéos haute définition avec audio, du contenu vidéo personnalisé et des modifications précises, le tout avec des invites textuelles simples. Movie Gen vise à simplifier la création de vidéos pour vous, que vous soyez cinéaste, créateur de contenu ou simplement quelqu'un qui souhaite exprimer sa créativité à travers le multimédia.
Movie Gen de Meta est une suite de modèles de base conçue pour vous offrir une production vidéo de qualité professionnelle, quel que soit votre niveau d'expertise. Selon Meta, l'outil s'appuie sur les générations précédentes de modèles d'IA de l'entreprise, offrant des capacités avancées en matière de génération de vidéos, de personnalisation de vidéos, de montage et de production audio synchronisée. L'entreprise a publié un document de recherche contenant tous les détails techniques.
À l’instar de produits similaires tels que Pika, Runway et Sora, Movie Gen peut générer des vidéos de haute qualité à partir d’invites textuelles. Vous pouvez saisir une description, telle que « une journée à la plage avec des dauphins qui sautent en arrière-plan », et le modèle crée un clip vidéo de 16 secondes, avec des interactions d’objets plausibles, des mouvements et une dynamique de caméra. Le modèle aux 30 milliards de paramètres a été formé à l’aide d’ensembles de données sous licence et accessibles au public, ce qui en fait l’un des modèles les plus vastes et les plus performants de son genre dans la production vidéo.
Vidéos personnalisées
Poussant la personnalisation encore plus loin, Movie Gen vous permet de télécharger une image de vous-même ou d'autres personnes pour générer des vidéos personnalisées. En combinant l'image téléchargée avec un texte descriptif, l'IA génère une vidéo qui vous présente ou la personne de votre choix tout en conservant un mouvement et une identité humains réalistes. Cette capacité ouvre des possibilités créatives, vous permettant de vous imaginer dans des scénarios allant des royaumes fantastiques aux aventures quotidiennes.
Le montage vidéo simplifié
Meta met l'accent sur la simplicité de ses fonctionnalités de montage vidéo. Vous pouvez saisir une vidéo existante et fournir des invites spécifiques pour modifier son contenu, qu'il s'agisse de modifier l'arrière-plan, d'ajouter ou de supprimer des objets ou de modifier le style visuel général. Contrairement aux logiciels de montage vidéo traditionnels, qui exigent souvent des compétences spécialisées, la fonction de montage de Movie Gen permet des modifications précises et localisées, tout en préservant l'intégrité de la vidéo d'origine.
Générer de l'audio
L'une des caractéristiques les plus remarquables de Movie Gen est sa capacité à générer un son synchronisé avec le contenu vidéo. Le modèle audio de 13 milliards de paramètres peut ajouter des sons ambiants, des effets Foley et de la musique instrumentale pour compléter vos scènes vidéo, avec jusqu'à 45 secondes d'audio par clip. L'audio est contextuellement aligné avec les visuels (par exemple, en associant les sons de l'océan à une scène de plage) et le modèle peut étendre le son de manière transparente pour des séquences plus longues.
Les outils d'IA de Meta s'inscrivent dans une démarche plus large au sein de l'industrie visant à démocratiser la création de contenu. Des concurrents comme OpenAI, Google et de nombreuses startups ont également travaillé sur des outils similaires. Meta, cependant, a positionné Movie Gen comme une offre unique, avec son approche multimodale et ses capacités intégrées. En combinant la vidéo, l'audio et le montage en un seul outil cohérent, il vise à vous offrir un contrôle sans précédent sans la courbe d'apprentissage abrupte des outils professionnels.
Malgré ses fonctionnalités avancées, Meta reconnaît que le modèle n’est pas sans limites. L’IA peut produire des résultats incohérents pour des messages plus complexes, comme en témoigne une démonstration qui a attaché par erreur une main humaine à un chien tenant un téléphone. Meta est également prudent quant aux implications éthiques de sa technologie, compte tenu de son utilisation abusive potentielle pour créer de la désinformation. L’entreprise a intégré des filigranes générés par l’IA sur du contenu, même si ceux-ci pourraient potentiellement être supprimés par des utilisateurs malveillants.
Meta considère Movie Gen comme un outil qui pourrait aider les cinéastes, les créateurs de contenu en ligne et les utilisateurs ordinaires. L’idée est que chacun puisse donner vie à ses histoires – des salutations animées personnalisées aux séquences cinématographiques complètes – en utilisant uniquement son imagination et quelques lignes de texte. Alors que Meta continue d’affiner ses modèles d’IA, l’entreprise prévoit de collaborer étroitement avec des professionnels de la création, en veillant à ce que des outils comme Movie Gen améliorent, plutôt que de remplacer, la créativité humaine.
Le monde de la production vidéo et audio évolue rapidement, et des outils comme Movie Gen sont à l'avant-garde de cette évolution, rendant la création multimédia de haute qualité plus accessible que jamais. Pour les créateurs, cela signifie que la frontière entre imagination et production n'a jamais été aussi fine.