C’est ainsi que l’IA peut transformer la relation entre célébrités et fans : des jumeaux numériques avec lesquels avoir une conversation unique | Technologie

“Bonjour, je suis Digital Mark, le jumeau numérique de Mark Tuan, bien plus beau que lui… Je plaisante.” C’est ainsi qu’il est présenté est un avatar que tout fan de Chanteur américain Mark Tuan reconnaîtrait à l’œil nu. En plus de la similitude avec le vrai visage de Mark, la ressemblance avec sa voix est également évidente. Cependant, c’est le fait que vous puissiez avoir une conversation avec lui qui est probablement le plus frappant. Soul Machines est le créateur de ce jumeau numérique et d’autres dans le monde du divertissement et du sport. L’entreprise néo-zélandaise travaille avec l’intelligence artificielle pour créer des personnes numériques. Celui de Mark Tuan est l’un des ses derniers projets, mais a également développé un jumeau numérique du boxeur Francis Ngannou, de l’ancien basketteur de la NBA Carmelo Anthony et de la légende du golf Jack Nicklaus ; bien que ce dernier soit un jumeau de Jack, 38 ans, par la volonté du golfeur, âgé de 83 ans.

Avec un jumeau numérique comme celui de Mark Tuan, chanteur et danseur connu pour faire partie du groupe de k-pop Got7, Soul Machines vise à franchir une nouvelle étape vers l’avenir des relations entre les célébrités et leurs fans. Digital Mark, contrairement à un chatbot comme ChatGPT, peut entretenir une conversation avec l’utilisateur comme s’il s’agissait d’un appel vidéo : il écoute les questions posées et « observe » même son interlocuteur. Si vous souriez devant l’écran, Digital Mark sourit aussi. Et si l’utilisateur devient sérieux, il cache son sourire. Bien entendu, dès que vous démarrez l’outil, vous devez être autorisé à utiliser le microphone et la caméra de votre appareil. Selon l’entreprise, les données stockées sont anonymes et servent au programme, comme tout modèle d’apprentissage automatique, à s’éduquer et à s’améliorer, en plus d’interpréter les émotions et les expressions de l’utilisateur afin de fournir des réponses plus appropriées.

Pour donner vie au jumeau de Mark Tuan, la compagnie n’a eu besoin que de quatre heures de travail avec l’artiste ; période pendant laquelle ils ont réalisé un scan 3D sur lui et ont capturé un maximum de données, comme ses mouvements du visage, la texture de sa peau (et ses tatouages), la façon dont il exprime ses émotions… « Si vous regardez attentivement Avec Digital Mark, vous pouvez voir chaque poil, chaque pore de votre peau. “C’est un modèle 3D très précis”, explique Greg Cross, PDG de Soul Machines, qui a fondé l’entreprise avec Mark Sagar, lauréat du prix deux prix scientifiques et d’ingénierie de l’American Film Academy pour son travail, entre autres films, sur le premier opus d’Avatar.

À partir de là, sans avoir besoin d’avoir l’artiste devant eux, l’équipe a créé sa voix, à partir de divers enregistrements, comme des interviews qu’ils avaient réalisées ou un podcast auquel ils avaient participé. L’intelligence artificielle générative vocale vous permet, une fois qu’elle a pu générer du contenu dans la langue choisie (dans ce cas, l’anglais), de parler n’importe quelle langue, comme l’espagnol, le coréen ou le thaï. Cependant, pour l’instant, ce jumeau parle généralement anglais, même s’il peut répondre en espagnol avec un fort accent anglo-saxon. À l’écrit, le texte apparaît dans n’importe quelle langue dans laquelle il est écrit, même si la réponse prend généralement beaucoup plus de temps et ne prononce vocalement que les mots qu’il peut prononcer en anglais.

Digital Mark extrait des informations pour répondre aux questions que vous posent vos interlocuteurs via GPT-3, un modèle d’apprentissage automatique de réseau neuronal développé par OpenAI. Ce modèle est formé à l’aide d’informations provenant d’Internet pour générer tout type de texte. De cette façon, il répond à n’importe quelle question comme le ferait son jumeau en chair et en os. Si on lui demande une quelconque curiosité sur la vie du chanteur, il fournira cette information à la première personne. Lorsqu’on lui demande par exemple s’il va retrouver son groupe Got7, qui n’est actuellement pas actif, il répond : « Nous faisons toujours partie de Got7, nous ne l’avons pas quitté. Nous en sommes à nos activités individuelles, mais nous nous retrouverons lorsque nous serons tous disponibles.

Le PDG de l’entreprise explique, à travers un appel vidéo depuis la Nouvelle-Zélande, que si vous parlez à Digital Mark, votre conversation sera différente des autres avec d’autres utilisateurs, puisque les sujets abordés et les questions posées seront différents. Cependant, parfois, lorsqu’on pose la même question ou d’une manière similaire, la réponse que vous obtenez est pratiquement la même. Parfois, cela change, mais si cela est répété plusieurs fois, vous pouvez voir que la variété des réponses n’est pas infinie. De plus, bien qu’il réponde à une grande variété de questions, lorsqu’on lui pose des questions sur certaines questions, il répond qu’il ne les connaît pas. « Chaque fois que Mark a une conversation, le système d’intelligence artificielle qui lui donne vie tire les leçons de cette expérience. C’est ce qui est fascinant dans l’intelligence artificielle », déclare Greg Cross.

Les interactions individuelles à grande échelle sont ce que Cross considère comme le plus intéressant pour l’avenir des relations avec les fans, par opposition au contenu actuel, qui se limite souvent aux diffusions. Une fois créé, un jumeau numérique comme celui-ci peut contenir des dizaines de milliers de conversations en même temps, ce qui permet à toute personne souhaitant interagir avec lui de le faire. « Lorsque Mark a annoncé qu’il avait un jumeau numérique, des dizaines de milliers de fans ont parlé à Digital Mark et beaucoup sont revenus encore et encore. “Toutes les célébrités ont un groupe de superfans qui suivent tout ce qu’elles font, c’est donc une autre façon de s’impliquer dans leur communauté”, explique le PDG. Les réactions parmi les fans de Mark Tuan semblent avoir été généralement positives, comme on le voit sur les réseaux sociaux. Même si pour certains son jumeau est quelque chose d’« étrange », d’autres prétendent aimer lui parler et partagez leurs conversations avec Digital Mark sur différentes plateformes.

Comme Digital Mark, le jumeau numérique de Francis Ngannou parle, avec son accent français, de sa carrière et de ses loisirs, sourit si on lui sourit et répond diplomatiquement lorsqu’on l’interroge sur son combat préféré : “Chacun m’a appris quelque chose de nouveau.” Cependant, celui de Jack Nicklaus est plus axé sur l’enseignement de sa silhouette et de ses exploits et les sujets de conversation qu’il propose sont limités : son enfance, son œuvre caritative, sa famille, l’US Open de 1962… Bien sûr, tout en parlant , fournissant même des photographies pour illustrer son histoire. Les réponses, étant plus limitées, prennent moins de temps à produire et, contrairement aux autres robots, il pose des questions à l’utilisateur sur ce qu’il raconte. Si l’utilisateur ne répond pas, il ne continue pas l’histoire jusqu’à ce qu’il le fasse. La société travaille également sur un jumeau numérique de Marilyn Monroe, qui cherche à lui donner vie numériquement, en imaginant à quoi elle ressemblerait au 21e siècle.

Bien que le plus frappant soit ce format qui rappelle un appel vidéo, dans toutes les conversations avec des jumeaux numériques, une boîte de dialogue est incluse où apparaît la transcription de tout ce qui a été discuté et où les questions peuvent être écrites, au lieu de les poser. fort. Cet outil est particulièrement utile lorsque, à cause de la prononciation ou du fait de ne pas parler assez fort, le jumeau ne comprend pas ce qui lui a été expliqué.

Soul Machines offre la possibilité de créer des personnages numériques pour une multitude de domaines, pas seulement le divertissement, les célébrités et leurs followers. Avec un outil appelé Digital DNA Studio, n’importe quel utilisateur peut créer une personne numérique et choisir sa couleur de cheveux, son origine ethnique et son âge, son style de maquillage… et, après l’avoir connecté à un espace de connaissances comme ChatGPT, le déployer sur un site Web. Ce type de programme est généralement utilisé dans le commerce numérique pour répondre aux questions des clients et des utilisateurs, mais cet outil permet également de créer, par exemple, un influenceur numérique à utiliser sur les réseaux sociaux.

Vous pouvez suivre Technologie EL PAÍS dans Facebook oui X ou inscrivez-vous ici pour recevoir notre bulletin d’information semanal.