Le premier étend le cadrage d’une image dans n’importe quelle direction, créant de nouveaux éléments à partir de zéro qui semblent se fondre dans l’œuvre originale. Le second est un pinceau qui remplace les éléments de l’image par tout ce que vous tapez dans l’invite.
Si vous n’avez pas encore reçu d’invitation DALL-E, la meilleure façon de découvrir la puissance de ces outils est de charger ce filtre AR Instagram et regardez ce qu’ils peuvent faire.
C’est assez simple. Vous chargez le filtre, trouvez une surface plane dans votre pièce et créez une galerie instantanée de trois classiques : René Magritte Le fils de l’hommeJohannes Vermeer Une fille avec une boucle d’oreilleet Léonard de Vinci Mona Lisa.
Il n’y a rien de spécial jusqu’à ce que vous vous rapprochiez. Puis, tout d’un coup, Mona Lisa recule et vous découvrez autour d’elle un tout nouveau monde plein de profondeur et de détails.
Le processus de surpeinture et de peinture
La nouvelle œuvre d’art semble peinte par les artistes originaux, mais elle a été réalisée par des artistes modernes utilisant exclusivement DALL-E.
“Je viens en fait d’un milieu traditionnel des beaux-arts, comme la peinture à l’huile. Je voulais donc vraiment m’assurer que je respectais la peinture », explique Joséphine Miller, un directeur artistique et artiste AR/XR/3D qui a créé l’univers étendu de Le fils de l’homme.
Miller a donné à son protagoniste un visage, utilisant les pouvoirs de génération d’images DALL-E, qui correspond parfaitement au style de Magritte. Mais ce n’était pas aussi simple que de conjurer le visage d’un homme sans visage en utilisant la magie de l’IA. En fait, il a fallu beaucoup d’essais et d’erreurs pour obtenir le bon visage tel que Miller l’imaginait : “J’ai fait environ 200 visages pour cela en utilisant la fonction d’inpainting.”
Comme pour les deux autres peintures, le processus a nécessité la création de différentes versions de certaines parties pour produire tous les différents éléments nécessaires pour créer la sensation de profondeur.
Dans le cas de Le fils de l’hommele visage et tous les autres éléments de la peinture étendue ont été découpés pour créer un environnement en deux dimensions et demie, dans lequel chacun des plans de découpe est mis en place dans un espace 3D, comme les calques définis sur un scène de théâtre ou les plans multiples utilisés dans l’animation par caméra.
“Lorsque vous venez de voir le filtre pour la première fois, le visage apparaît comme dans la peinture originale. Il n’y a pas de changement », dit Manuel “manu.vision” Sincèrementun artiste et responsable de la conception XR chez Unity qui a réalisé la version étendue du Mona Lisa.
C’est seulement lorsque vous vous approchez que la peinture complète commence à se révéler. Et puis, lorsque vous déplacez votre téléphone dans n’importe quelle direction, vous voyez d’autres choses, comme le vrai visage de la personne derrière la pomme.
«Il y a ces milliers d’hommes qui flottent. Ils ont tous des visages individuels et Joséphine a travaillé sur chaque visage. C’est fou », dit Sainsily.
L’ensemble a ensuite été programmé dans un espace 3D à l’aide de Spark AR Studio pour créer l’effet Instagram. Le produit final est soigné et satisfaisant, comme si vous accédiez à une version secrète plus grande que nature d’une peinture qui n’a jamais existé.
Bien plus qu’une simple IA
Au-delà du travail de découpage et de fabrication du filtre AR – qui est un travail fastidieux et régulier – le processus de création de l’ensemble du produit est un travail très dur, pas aussi simple que de taper une invite et d’avoir le résultat final.
Pour montrer cela et souligner que cette technologie d’intelligence artificielle est extrêmement puissante mais qu’elle n’est qu’un outil de plus dans l’arsenal d’un artiste, Sainsily dit qu’ils se sont tous filmés en train de faire le travail, ce qui a également aidé le processus de création car il a informé les autres membres de l’équipe en charge. du découpage, du compositing et de la programmation des critères de production de la pièce finale.
À la fin, ce processus – et le résultat final – témoigne également de l’importance de l’homme dans la création de ces œuvres. Bien que DALL-E, Stable Diffusion et le reste des outils de conversion de texte en image soient fantastiques, ils n’en sont pas encore au point où ils peuvent prendre des décisions créatives. Ils sortent juste. Cela nécessite le travail de personnes comme Miller et Sainsily pour créer des œuvres d’art convaincantes qui ont du sens. Au moins pour l’instant.
