Meta Previews Movie Gen, des outils d’IA qui transforment les rêves en vidéos

Méta prévisualisée nouveaux outils d’IA vendredi, appelé Movie Gen, qui peut créer des vidéos, les éditer automatiquement et superposer le son généré par l’IA pour un clip vidéo cohérent.

Movie Gen fonctionne avec des invites de texte écrites, une image ou une vidéo existante en entrée. Il existe également une option permettant d’ajouter une photo personnelle afin que les utilisateurs puissent se voir dans la vidéo.

En rapport: Meta met des images d’IA sur vos flux Facebook et Instagram, avec des images personnalisées

Une fois que l’IA a opéré sa magie et généré une vidéo, un utilisateur peut saisir une invite de texte pour créer une bande-son audio personnalisée à lire avec la vidéo.

^{Un aperçu d’une vidéo Meta Movie Gen créée à partir d’une image. Crédit : Méta}

Tandis que Meta dit Vidéos haute définition de Movie Gen sont « les premiers du genre dans l’industrie », lorsque créer de longues vidéos à différents formats d’image, cela ne signifie pas que l’IA est parfaite. À l’heure actuelle, l’IA ne peut générer que des vidéos d’une durée maximale de 16 secondes – et elle ne remplit pas toujours la mission correctement.

Dans un démonstration Selon le New York Times, l’outil d’IA de Meta a commis une erreur. Bien qu’elle ait pu créer une vidéo d’un chien dans un parc parlant dans un téléphone, l’IA a fait une erreur en plaçant une main humaine autour du téléphone au lieu de la patte d’un chien.

? Aujourd’hui, nous présentons Meta Movie Gen : les modèles de fondations multimédias les plus avancés à ce jour.

Développé par les équipes de recherche en IA de Meta, Movie Gen fournit des résultats de pointe dans une gamme de fonctionnalités. Nous sommes enthousiasmés par le potentiel de cette ligne de recherche à inaugurer… pic.twitter.com/NDOnyKOOyq

– L’IA chez Meta (@AIatMeta) 4 octobre 2024

Chris Cox, directeur des produits chez Meta, indiqué dans un article de Threads que Movie Gen est « leader du secteur » en termes de qualité vidéo mais que Meta n’est pas prêt à publier les outils car ils sont trop chers et les vidéos prennent actuellement trop de temps à générer.

Meta partage ce qu’elle a en ce moment parce que les résultats « deviennent assez impressionnants », Cox a écrit.

Meta n’est pas le premier à présenter un outil générateur d’IA texte-vidéo : le créateur de ChatGPT, OpenAI, l’a fait en février avec son modèle de conversion texte-vidéo Sora.

En juillet, OpenAI publié plusieurs vidéos YouTube en partenariat avec des artistes et des entrepreneurs montrant comment Sora pouvait créer des courts métrages fantastiques.

En rapport: Mark Zuckerberg fait un meilleur travail que ses rivaux pour expliquer l’IA