Les chercheurs ont construit une IA qui génère automatiquement des bandes-annonces de films

Vous pouvez avoir Citizen Kane etLe Parrain. Conservez vos films 3D et vos expériences IMAX. Manquez-moi avec les épopées, les suites et le cinéma expérimental. La seule vraie forme d'art basée sur le cinéma est la bande-annonce de films.

Lorsque vous allez au cinéma, il n'y a aucune garantie que vous n'êtes pas sur le point de vous asseoir pendant 90 minutes. C'est la chance que nous prenons tous lorsque nous déboursons plus de 25 dollars pour voir la suite du blockbuster de cette année.

Mais, pour mon argent, cela en vaut toujours la peine tant que j'arrive assez tôt pour profiter des avant-premières. C'est pourquoi je suis extrêmement enthousiasmé par ce document de recherche pré-imprimé de l'Université d'Édimbourg.

Selon les chercheurs, ils ont développé un modèle d'IA basé sur une paire de réseaux de neurones capables de cracher une bande-annonce appropriée et captivante pour n'importe quel film.

En fait, l'équipe a utilisé le système pour cracher plus de 40 bandes-annonces de films existants et les employés d'Amazon Turk avaient tendance à préférer les bandes-annonces générées par l'IA aux bandes-annonces officielles.

Selon le document de l'équipe :

Pour créer des bandes-annonces automatiquement, nous devons effectuer des tâches de bas niveau telles que l'identification de personnes, la reconnaissance d'actions et la prédiction de sentiments, mais également des tâches de plus haut niveau telles que la compréhension des liens entre les événements et leur causalité, ainsi que de tirer des inférences sur les personnages et leurs actions.

Ils ont pu accomplir cela en utilisant deux réseaux neuronaux distincts. Le premier traite la vidéo et l'audio du film afin, essentiellement, de trouver des scènes d'intérêt.

Et le second est essentiellement l'arbitre de ce qui est intéressant. Il visualise une version textuelle du film – similaire à un scénario – et utilise le traitement du langage naturel pour trouver des moments importants et émotionnels. .

Les travaux antérieurs dans le domaine incluent une collaboration entre des chercheurs travaillant avec IBM qui ont construit leur propre générateur de bande-annonce de film sur mesure. Mais celui-ci n'a apparemment généré que des bandes-annonces pour un film d'horreur spécifique.

En règle générale, les générateurs d'IA sont formés sur des milliers d'heures de contenu similaire afin de montrer à la machine ce qu'elle vise. Mais ces modèles n'essaient pas d'halluciner quelque chose qui ressemble à une bande-annonce de film, ils en assemblent une. C'est quelque chose qui implique plus que de simplement peaufiner les paramètres à l'intérieur d'une boîte noire.

Une bonne bande-annonce peut faire ou défaire un film, financièrement parlant. Et une IA capable de démocratiser la création de bandes-annonces de haute qualité pourrait changer la donne pour les cinéastes indépendants.

Sans parler du fait que je préfère regarder 90 minutes de bandes-annonces générées par l'IA que la plupart des films de toute façon. En espérant que cela trouve une version Web un jour afin que nous puissions l'essayer par nous-mêmes.

H/t : TechExplore