Comment Guns N’ Roses a utilisé l’IA pour créer sa nouvelle vidéo « The General »

Les vidéoclips sont depuis longtemps des bancs d’essai pour les nouvelles technologies, depuis les personnages 3D qui peuplent « Money for Nothing » de Dire Straits jusqu’aux techniques pionnières de CGI utilisées dans « Black or White » de Michael Jackson.

Aujourd’hui, le groupe de hard rock emblématique Guns N’ Roses a intégré l’intelligence artificielle générative dans sa dernière vidéo pour accompagner sa nouvelle chanson « The General ».

Le groupe s’est tourné vers Creative Works London, le studio qui a tout produit, des animations pour leurs concerts aux vidéoclips.

« Le Général » suit un jeune garçon à travers les rues d’un étrange paysage urbain aux teintes magenta alors qu’il est menacé par des jouets d’enfance qui prennent une apparence menaçante.

Selon le directeur créatif de Creative Works London, Dan Potter, la vidéo a été conçue à l’origine comme une vidéo entièrement animée dans Unreal Engine. Environ six semaines après le début de la production, le manager du groupe lui a envoyé un lien vers le concours d’IA générative DiffuseTogether de Peter Gabriel.

« Je suivais ça », a-t-il déclaré, ajoutant qu’il « jouait » avec la plateforme d’IA générative Stable Diffusion depuis son lancement en 2022. « Alors quand il me l’a envoyé, c’était comme : ‘Oh, je’ Je suis là, je sais ce qu’il faut pour accomplir ce genre de travail.

Cet amour pour l’IA

« Je suis resté clandestin pendant un certain temps, littéralement pendant cinq jours », a déclaré Potter. « Je suis entré dans mon studio et j’ai commencé à explorer tout ce qui concernait l’utilisation de tout ce que nous avons fait jusqu’à présent dans Unreal Engine : lui donner l’esthétique, lui donner le mouvement, lui donner l’histoire, donner à l’IA toutes les idées que nous avions. développé au cours de ces six semaines.

Creative Works London a développé une « sorte de flux de travail hybride », a déclaré Potter, en utilisant des croquis conceptuels et des séquences Unreal Engine comme point de départ avec lequel Stable Diffusion peut travailler avant de « contrôler l’ambiance et l’apparence avec des indices ».

Potter a ajouté qu’il avait formé un hypernet (ou un réseau neuronal de support) sur Stable Diffusion en utilisant le travail précédent du studio pour Guns N’ Roses pour aider à capturer le style visuel du groupe. « J’ai pu prendre certains de mes croquis, les peindre et les amener à un autre niveau », a expliqué Potter, ajoutant que « l’intelligence artificielle accélère mon processus ». [creativo] exponentiellement. »

« J’y introduisais des images d’Unreal Engine de différentes manières », a-t-il expliqué. « Je l’ai nourri comme une couche sur laquelle je rêvais, et aussi comme point de départ pour rêver le reste de la visualisation. »

rue des rêves

Là où l’IA générative montre tout son potentiel, c’est dans la création des images oniriques et troublantes vues tout au long de la vidéo. Lorsque la caméra effectue un panoramique et une inclinaison, l’IA « rêve » chaque image séparément, avec des éléments d’arrière-plan scintillent et se transforment. Les ours en peluche se désintègrent et se reforment au fur et à mesure que les chaises, les fenêtres se transforment en portes et en couloirs, et les créatures biomécaniques directement issues des peintures de Hieronymus Bosch apparaissent et disparaissent à l’arrière-plan avant de se dissoudre dans leurs éléments constitutifs.

« Saisir des rendus à partir d’Unreal Engine et ensuite les faire rêver, c’était pour moi une utilisation vraiment intéressante », a déclaré Potter. « Parce que ces rendus ont été créés par six ou sept personnes, et nous leur avons immédiatement donné une ambiance différente. »

De plus, Potter a utilisé des signaux de diffusion stable pour convertir des images d’action réelle du groupe en images générées par l’IA, en alternant entre les deux. « Il lui avait donné une indication, comme ‘rock star futuriste et psychotique' », a-t-il déclaré, désignant une image d’Axl Rose dépeinte comme une rock star futuriste et psychotique.

Potter a tenu à souligner que Creative Works utilisait l’IA générative pour améliorer la production du studio, plutôt que de remplacer le travail des artistes. « Je voulais que ce soit aussi proche que possible d’un processus dessiné à la main et avec intervention humaine », a-t-il déclaré.

Pour cela, les images générées par Stable Diffusion s’appuient sur le travail des artistes du studio, tandis que la vidéo comprend également de nombreuses touches faites à la main, comme des graffitis superposés à l’image, des transitions à travers un trou d’égout avec le logo de Guns N’ Roses et logo « Le Général » apparaissant sur une canette de boisson écrasée au début.

Ce logo comporte également un « œuf de Pâques caché et coquin », a déclaré Potter. « Je viens d’ajouter le ‘L’, donc vous avez le ‘G’, le ‘N’ et le ‘R’, et un ‘AI’ à la fin. »

Vivez et laissez l’IA vous aider

Potter a déclaré qu’il considérait l’IA comme un « outil de création » plutôt que comme un substitut aux artistes.

« Je pense que le problème que beaucoup d’artistes ont avec l’IA est qu’elle dit presque : ‘Ta-da ! Voilà votre image terminée' », a-t-il expliqué. « Et c’est un endroit très dangereux pour un créatif, où vous pensez : ‘Eh bien, il suffit de mettre un signal et vous obtenez le résultat.' »

Avec le clip de « The General », a-t-il ajouté, « j’étais dans une position unique où moi seul pouvais le faire ».

« Ce que je voulais faire avec l’IA, c’était dire : ‘Si vous me confiez quelque chose d’aussi controversé, qui de mieux que Guns N’ Roses, le groupe le plus dangereux au monde, pour tester l’IA' », a-t-il déclaré. « Parce qu’en fin de compte, c’est un outil créatif, je voulais que ce soit quelque chose qui ressorte de toutes les manières possibles au sein du groupe. »

Après « The General », Creative Works London étudie d’autres moyens d’intégrer l’IA dans la production de Guns N’ Roses, notamment en combinant l’IA avec iMAG, le système de projection vidéo à grande échelle utilisé dans les performances d’Alive. « Ce que nous avons fait avec l’émission Guns, nous n’avons pas vraiment réussi, parce que les équipes n’y sont pas préparées, c’est laisser du contenu en temps réel sur l’iMAG », a-t-il déclaré.

L’idée, a-t-il expliqué, est de « faire interagir Axl avec le contenu provenant de l’écran principal, mais sur l’iMAG », avec des éléments de réalité augmentée apparaissant devant et derrière lui. « Ce que nous essayons de faire là-bas, c’est une sorte de terrain d’entente, de sorte que si vous êtes à un concert et que vous mettez vos lunettes, vous puissiez voir tout ce contenu en temps réel circuler dans le groupe. »

Il a suggéré qu’à l’avenir, les performances live pourraient incorporer des éléments de réalité augmentée, « où les gens pourraient simplement porter ces lunettes et ensuite voir le contenu exploser au-delà de la scène et autour d’eux, dans ce genre d’hallucination de type DMT ».

Quant à l’avenir des artistes dans un monde d’IA générative, Potter a déclaré : « Nous avons estimé que nous devions à tout le monde de simplement dire : ‘Une importante équipe d’artistes était derrière tout cela et aucun artiste n’est mort en faisant cela.' » Il a ajouté que l’IA « ne va pas tuer l’artiste, cela va simplement amplifier et améliorer ce que nous faisons déjà. Je dirais que l’avenir consiste davantage à être comme vous le guidez. »

Edité par Andrew Hayward