Culture et médias

Movie Gen : Meta veut réunir vidéo, montage et son dans une même IA

Meta a présenté Movie Gen, une famille de modèles d’intelligence artificielle conçue pour générer des vidéos, les modifier à partir d’instructions écrites et y ajouter une bande-son cohérente. Encore au stade de la recherche en octobre 2024, cette technologie illustre l’accélération de la course à la création audiovisuelle par IA.

Un créateur examine des séquences vidéo générées par IA et une piste audio synchronisée sur un écran.
Illustration : Actu.ai

Meta ne se contente plus de faire parler ses chatbots ou de créer des images fixes. Avec Movie Gen, présenté au début d’octobre 2024, le groupe explore une étape plus ambitieuse : fabriquer une courte vidéo à partir d’une phrase, transformer une séquence existante à la demande et générer une bande-son qui suit l’action à l’écran.

L’annonce intervient dans une période de compétition intense autour de la vidéo générative. Après les démonstrations de Sora par OpenAI, les travaux de Google sur Veo et les outils déjà proposés par des acteurs comme Runway, la vidéo devient l’un des principaux terrains de la course à l’IA générative. La particularité de Movie Gen est de ne pas traiter le son comme un simple ajout : Meta veut associer création visuelle, édition et audio dans une même famille de modèles.

Il faut toutefois distinguer une démonstration de recherche d’un service prêt à l’emploi. Au 7 octobre 2024, Meta ne met pas Movie Gen à la disposition du public. L’entreprise présente des résultats, des évaluations et des exemples de création, sans annoncer de calendrier de lancement commercial.

Movie Gen, qu’est-ce que c’est exactement ?

Movie Gen désigne une famille de modèles d’IA capables de travailler sur plusieurs formes de médias. L’utilisateur peut décrire une scène en langage naturel, fournir une image comme point de départ ou demander une modification précise d’une vidéo. Le système génère alors des images animées correspondant à la consigne.

L’ambition est comparable à celle d’un outil de création qui comprendrait une consigne telle que : « Un animal surfe sur une vague », puis construirait les images nécessaires, le mouvement de l’eau, le déplacement du sujet et le cadrage. Meta a notamment diffusé des exemples mettant en scène des animaux nageant, surfant ou participant à des séquences humoristiques.

Les capacités annoncées ne se limitent pas à la génération depuis un texte. Movie Gen peut également personnaliser une vidéo à partir d’une image fournie par l’utilisateur et appliquer des retouches à une vidéo existante. Une instruction écrite peut servir à ajouter un élément, en enlever un, en remplacer un autre ou modifier plus largement l’apparence d’une scène.

Fonction de Movie GenCe que Meta annonceLimite importante au 7 octobre 2024
Génération vidéo depuis un texteCréation de clips allant jusqu’à 16 secondes en 1 080pIl s’agit de courtes séquences, pas d’un film complet
Génération depuis une imageAnimation et personnalisation à partir d’une image de référenceLa fidélité au sujet et les détails doivent être évalués au cas par cas
Édition vidéo par texteAjout, retrait ou remplacement d’éléments dans une vidéoLes démonstrations ne remplacent pas un logiciel de montage complet
Génération audioJusqu’à 45 secondes d’effets sonores, d’ambiances et de musique instrumentaleL’audio et la vidéo n’ont pas la même durée maximale annoncée

Cette distinction de durée est essentielle. Les vidéos présentées peuvent atteindre 16 secondes, tandis que Movie Gen Audio peut générer jusqu’à 45 secondes de son. Confondre les deux revient à surestimer la longueur des vidéos que la technologie est censée produire.

Du prompt au clip : comment fonctionne la création ?

Le principe paraît simple pour l’utilisateur : il formule une idée, l’IA produit une séquence. En pratique, la demande doit contenir suffisamment d’éléments pour guider le résultat. Le sujet, l’action, le décor et parfois le type de cadrage ou l’atmosphère contribuent à réduire l’ambiguïté.

Une demande très vague laisse au modèle une grande liberté d’interprétation. À l’inverse, une consigne plus précise aide à orienter la scène. C’est l’un des changements majeurs apportés par ces outils : une intention créative peut être exprimée d’abord en mots, plutôt qu’au moyen d’une caméra, d’acteurs, d’un décor et d’un tournage.

Movie Gen propose aussi une approche dite de personnalisation. À partir d’une image, le modèle peut placer un sujet dans une scène animée. Pour un créateur, l’intérêt potentiel est évident : imaginer une publicité, un clip ou une courte fiction sans reconstruire chaque plan à partir de zéro. Pour le grand public, cette fonction rapproche la vidéo générative de l’usage quotidien, puisque la matière de départ peut être une photo personnelle.

Mais cette facilité pose immédiatement une question de contrôle. Plus il devient simple d’animer l’image d’une personne, plus il importe de savoir si elle a donné son accord et si la vidéo est clairement identifiée comme générée ou modifiée par IA. Les résultats impressionnants d’une démonstration ne suppriment ni le risque de confusion, ni la responsabilité de celui qui publie le contenu.

L’édition par texte, une promesse qui dépasse la simple génération

Créer une vidéo à partir de rien est spectaculaire, mais la modification d’images existantes peut s’avérer tout aussi importante. Meta présente Movie Gen comme un outil capable de réaliser des retouches localisées ou globales à partir d’une instruction textuelle.

Dans un logiciel classique, changer un objet dans un plan demande souvent de détourer des éléments image par image, d’ajuster les ombres, de conserver les mouvements et de corriger les raccords. Une IA promet d’exécuter une partie de ces opérations à partir d’une phrase. C’est une évolution potentiellement utile pour les maquettes, les prototypes visuels, les contenus de réseaux sociaux ou les premières étapes d’une campagne.

Cela ne signifie pas que le montage traditionnel disparaît. Un professionnel conserve des besoins que la simple génération ne résout pas automatiquement : respecter une charte de marque, maîtriser chaque raccord, garantir la lisibilité d’un message, intégrer des images réelles ou obtenir des droits sur les éléments utilisés. À ce stade, Movie Gen doit donc être compris comme une technologie de génération et d’expérimentation, pas comme l’équivalent direct d’une chaîne de postproduction complète.

Ce que Movie Gen peut changer dans la création d’un clip court

Avec Movie Gen

  • Une idée peut être formulée en texte ou amorcée par une image.
  • La génération, la retouche et le son sont réunis dans une même famille de modèles.
  • Les modifications visuelles peuvent être demandées en langage naturel.
  • Le modèle vise des séquences courtes, jusqu’à 16 secondes pour la vidéo.
  • Le résultat doit être vérifié avant toute publication.

Avec une production classique

  • Le tournage mobilise généralement caméra, décor, interprètes et équipe technique.
  • Les retouches nécessitent souvent des opérations précises de montage et d’effets visuels.
  • Le son est enregistré, choisi ou mixé séparément de l’image.
  • La durée et le contrôle plan par plan dépendent du travail de production.
  • Les autorisations de tournage et droits des participants restent identifiables dès l’origine.

Pourquoi le son synchronisé est un enjeu central

Une vidéo silencieuse peut suffire à une démonstration technique, mais elle paraît rarement achevée. Le son donne une échelle aux objets, indique la matière, renforce un mouvement et participe fortement à l’immersion. Un pas dans la neige, le bruit d’un moteur ou une ambiance de rue font comprendre une scène autant que les images.

Meta affirme que Movie Gen Audio peut créer des effets sonores, des sons d’ambiance et de la musique instrumentale. Le système est conçu pour que le résultat corresponde aux événements visibles : un objet qui tombe, une porte qui se ferme ou un animal qui se déplace devraient s’accompagner d’un son au moment pertinent.

La synchronisation est un défi technique et créatif. Il ne suffit pas d’ajouter une musique générique sous une séquence. Il faut relier les évolutions de l’image aux changements sonores, tout en conservant une ambiance cohérente. Une scène à l’extérieur n’appelle pas les mêmes réverbérations qu’une pièce fermée, et une action rapide exige un rythme sonore adapté.

L’intégration de l’audio dans Movie Gen répond donc à une limite fréquente des premiers générateurs vidéo : des clips visuellement convaincants, mais peu exploitables sans travail supplémentaire. Reste à savoir si cette promesse tiendra dans des usages variés et hors des exemples sélectionnés par l’entreprise.

Une avancée pour les créateurs, mais pas un bouton magique

Pour les professionnels de la communication, du marketing, de l’animation ou des réseaux sociaux, une telle technologie peut accélérer la phase d’idéation. Elle pourrait permettre de visualiser un concept avant un tournage, de tester plusieurs univers ou de produire rapidement une ébauche à présenter à une équipe.

Les créateurs indépendants pourraient également y voir une manière d’accéder à des moyens visuels auparavant coûteux. Une personne seule peut décrire un décor, une action ou un effet difficile à filmer. Cette démocratisation annoncée doit toutefois être nuancée : la qualité dépendra de la précision des consignes, des limites du modèle et du travail humain nécessaire pour sélectionner, corriger et assembler les résultats.

L’IA générative ne répond pas non plus à toutes les questions de production. Un contenu de qualité doit avoir une idée, un rythme, un point de vue et une finalité. Générer de nombreuses images n’équivaut pas à raconter une histoire. Dans les métiers créatifs, l’outil peut déplacer une partie du travail, notamment vers l’écriture des consignes, la direction artistique et la vérification, plutôt que supprimer le besoin de compétence.

Meta face à OpenAI et à la course à la vidéo générative

Movie Gen arrive alors que les grands laboratoires multiplient les annonces dans l’IA vidéo. OpenAI a marqué les esprits avec Sora, capable de générer des scènes vidéo à partir de descriptions textuelles. Google travaille également sur Veo, tandis que d’autres entreprises développent des outils visant les créateurs et les professionnels.

Pour Meta, l’enjeu dépasse la démonstration technologique. Le groupe possède déjà des plateformes centrées sur le partage d’images et de vidéos, notamment Facebook, Instagram et WhatsApp. Des outils de création assistée par IA pourraient, à terme, renforcer l’attractivité de ces services. Pourtant, Meta n’annonce pas l’intégration de Movie Gen dans ses applications à la date de publication de cet article.

La compétition se joue sur plusieurs critères : la fidélité aux instructions, la qualité des mouvements, la stabilité des personnages, la longueur des vidéos, la résolution, la vitesse de génération et la capacité à éditer un résultat. L’audio synchronisé constitue un autre point de différenciation, car il rapproche le clip généré d’un contenu directement exploitable.

Les questions de confiance, de droits et d’usage responsable

La montée en puissance de la vidéo générative rend plus difficile la distinction entre une séquence filmée et une séquence créée par ordinateur. Ce n’est pas seulement une question artistique. Une vidéo réaliste peut être utilisée pour divertir, faire de la publicité ou illustrer une fiction, mais aussi pour tromper un public si son origine n’est pas claire.

La personnalisation à partir d’images soulève une vigilance particulière. Animer le visage ou l’apparence d’une personne sans son consentement peut alimenter des contenus trompeurs, notamment des deepfakes. Les plateformes, les entreprises qui développent les modèles et les utilisateurs ont donc un rôle à jouer dans l’identification des contenus synthétiques et la prévention des usages abusifs.

Les droits d’auteur constituent un autre sujet majeur. Les créateurs veulent savoir quelles œuvres ont servi à entraîner les modèles, tandis que les utilisateurs doivent comprendre les conditions applicables aux images, aux musiques et aux vidéos qu’ils produisent. Movie Gen s’inscrit ainsi dans un débat plus large sur la traçabilité des données et le partage de valeur dans la création numérique.

Ce qu’il faut surveiller après la présentation de Movie Gen

La première question concerne la disponibilité réelle de Movie Gen. Entre un modèle de recherche présenté avec des exemples et un produit utilisé quotidiennement, il existe un long chemin : infrastructure technique, coût de calcul, interface, garde-fous, retours des utilisateurs et règles de diffusion.

Il faudra également observer la régularité des résultats. Les démonstrations montrent ce qu’un système peut accomplir dans ses meilleurs cas. Les créateurs auront besoin de savoir si le modèle reste fiable sur des demandes complexes, s’il conserve l’identité d’un sujet d’un plan à l’autre et s’il respecte précisément une instruction d’édition.

Enfin, le développement de ces outils rendra la transparence plus importante. À mesure que vidéo, voix et son synthétiques gagnent en réalisme, les internautes auront besoin de repères clairs pour comprendre ce qu’ils regardent. Movie Gen montre que la création audiovisuelle par IA progresse rapidement. Son impact dépendra autant de son déploiement concret et de ses garde-fous que de la qualité de ses images.

Questions fréquentes

Qu’est-ce que Movie Gen de Meta ?

Movie Gen est une famille de modèles d’intelligence artificielle présentée par Meta en octobre 2024. Elle peut générer de courtes vidéos à partir d’un texte ou d’une image, modifier une vidéo existante selon une instruction écrite et produire des sons ou de la musique instrumentale adaptés aux images.

Quelle est la durée maximale des vidéos créées par Movie Gen ?

Meta annonce une génération vidéo allant jusqu’à 16 secondes en définition 1 080p. Le chiffre de 45 secondes concerne Movie Gen Audio, le modèle chargé de créer des effets sonores, des ambiances et de la musique. Les deux durées ne doivent donc pas être confondues.

Movie Gen est-il disponible pour le grand public ?

Non. Au 7 octobre 2024, Meta présente Movie Gen comme un projet de recherche et ne propose pas d’accès public au modèle. L’entreprise n’a pas annoncé de date de lancement ni confirmé une intégration dans Facebook, Instagram, WhatsApp ou ses autres applications.

Movie Gen peut-il modifier une vidéo existante ?

Oui. Meta indique que Movie Gen peut appliquer des modifications localisées ou plus globales à une vidéo en suivant une instruction textuelle. Les exemples évoquent notamment l’ajout, le retrait ou le remplacement d’éléments dans une scène, ce qui rapproche l’outil d’un assistant de retouche vidéo.

Quels sont les risques de la vidéo générée par IA ?

Une vidéo réaliste créée ou modifiée par IA peut tromper son audience si elle n’est pas identifiée clairement. La personnalisation depuis une image soulève aussi des questions de consentement et de deepfakes. S’ajoutent les enjeux liés aux données d’entraînement, aux droits d’auteur et à la responsabilité des personnes qui diffusent ces contenus.

Sources

Références consultées pour la rédaction de cet article. Les adresses sont indiquées à titre informatif et ne sont pas des liens.

  1. Meta AI, présentation officielle de Movie Genai.meta.com/research/movie-gen
  2. Article de recherche Movie Gen : A Cast of Media Foundation Modelsarxiv.org/abs/2410.13720
  3. Meta AI, page d’accueil des recherchesai.meta.com/research