Cinema · April 2024

Vidéo, son, musique... le panorama

Runway, Pika, Sora, Udio, Suno, Eleven Labs : l’état des lieux des IA génératives audiovisuelles, vu par Gilles Guerraz.

par Gilles Guerraz

TexteTexte : humain
VisuelsVisuels : IA
Robot rouge laqué aux platines de DJ

Runway, Pika, Haiper, Sora, Vidu… Ce ne sont pas des onomatopées mais bien des noms d’IA Gen de vidéo. Un conseil ? Un avis d’expert pour bien démarrer ?

L’unique conseil valable : essayez ! Certains outils nécessitent de commencer par une image générée dans Midjourney ou équivalent, avant de l’animer. D’autres s’accommodent très bien du prompt-to-video. On a tous de très grandes attentes vis-à-vis de Sora, même si quelque chose me dit que le processus créatif sera très itératif, au moins autant qu’il l’est actuellement avec Runway. En début d’année, j’ai réalisé une vidéo IA pour le groupe Decathlon. J’ai utilisé essentiellement Runway Gen-2. Il m’est arrivé à plusieurs reprises de dépasser les 30 itérations par plan avant d’obtenir (ou de ne pas obtenir) ce que je voulais. La génération de vidéo IA reste encore très aléatoire.

On a un dossier « Musique » dans ce numéro de IALS, avez-vous établi une liste des IA gen de sons, musiques, voix dans Generative ?

Pour la musique, mes deux préférés sont Udio et Suno. En quelques clics, ils permettent de générer des musiques avec ou sans paroles. Le niveau de qualité est assez exceptionnel au vu de la simplicité d’utilisation et de la vitesse d’exécution. Udio propose une qualité légèrement supérieure à celle de Suno, et il est gratuit pour le moment, ne vous privez pas de l’essayer. Le 3e sur le podium c’est Stable Audio. Il progresse mais il est encore assez loin des deux premiers.

Pour la voix, mon préféré reste Eleven Labs. Je l’ai utilisé pour de la voix off sur des projets vidéos professionnels. La qualité est sidérante, surtout en anglais. En revanche, et au même titre que la vidéo, le niveau de contrôle reste limité. Impossible d’indiquer une intention, un rythme ou un ton particulier. Malgré quelques curseurs pour modifier la stabilité de la voix, on reste finalement tributaire de l’aléatoire de la génération. Très bien pour du narratif standard, pas encore pour donner vie à des personnages vocaux. Mais ça reste tout de même bluffant. Eleven Labs permet également de générer des bruitages. La qualité demeure perfectible, surtout comparée à de vraies banques de sons. Mais je suis certain que ça va progresser rapidement.

En vidéo, sons etc. quelles sont les IA à usages professionnels et les IA « gadget » selon vous ?

Très honnêtement, l’usage professionnel reste encore assez limité. Il faut un projet qui s’accommode de l’esthétique de la vidéo IA, comme la dernière campagne de pub digitale Puma dont j’ai parlé récemment dans ma newsletter. Il s’agissait d’un contenu hybride, mélange de prise de vue réelle, animation et IA. Ce qui était également le cas de la campagne Under Armour avec Anthony Joshua, qui avait fait le (bad) buzz il y a quelques semaines.

Sora ouvrira très certainement de nouvelles possibilités, notamment dans l’obtention de rendus réalistes, comme l’a brillamment démontré le réalisateur Paul Trillo avec son dernier clip vidéo pour le groupe Washed Out. Le rendu rappelle furieusement l’esthétisme des clips de Michel Gondry des années 90. On a connu pire référence.

Pour la musique, Udio et Suno proposent un niveau de qualité si élevé que ces deux outils sont déjà utilisables à des fins professionnelles à mon sens.

In fine, toutes ces solutions IA sont des outils que les créatifs auront la liberté d’utiliser ou pas.

In fine, toutes ces solutions IA sont des outils que les créatifs auront la liberté d’utiliser ou pas, selon les exigences artistiques et budgétaires de leurs projets, de la même manière que les graphistes du début des années 90 avaient la liberté d’utiliser ou de ne pas utiliser Photoshop.

Pour aller plus loin

Les personnes et les sociétés citées dans cet article.

Les personnes

Laisse ton e-mail si tu veux recevoir les nouveaux articles et magazines.

Tout le magazine reste libre. Zéro spam, désinscription en un clic.

Envie d’apporter ta contribution ?

Un sujet, un regard, une expérience à partager : écris à la rédaction.