Un orchestre espagnol crée et interprète pour la première fois une œuvre réalisée avec l’IA : « C’était un pastiche » | Technologie

«Dites-lui de faire une œuvre à la manière de Chostakovitch, avec force, vivant, avec des instruments de métal et de percussions, avec de nombreux contrastes dynamiques », explique Rocío León, sous-déléguée artistique de l’Orchestre et Chœur RTVE. La pétition est en faveur d’une intelligence artificielle qui crée de la musique à partir de texte. Après quelques minutes, la machine renvoie une mélodie. Quelque chose de très métallique se met à sonner, puis tout à coup se tait et le ton change : « On dirait un orchestre de village », dit César Peña, membre de l’association. Laboratoire d’Innovation RTVE. “Maintenant, elle devient rock, elle a compris le genre métal, tu peux l’éteindre maintenant”, ajoute-t-il. Nous avons entendu pendant quelques minutes seulement : « Avez-vous l’essence de cet homme ? [Shostakovich]?”, demande Isabella Rocafull, également membre du Lab a León, la subdéléguée artistique. “Non”, répond-il sans hésitation.

Cette demande n’était qu’un test supplémentaire de la deuxième session pour créer avec l’IA une œuvre de quelques minutes pour orchestre symphonique. Pour l’instant, le résultat était mauvais. León essaie alors une autre voie : « Dites-lui de voir comment Bach écrirait une pièce pour un orchestre symphonique en ré majeur pour des dessins animés d’action », demande-t-il. Le résultat est également strident : « Je n’aime pas ça, il n’a pas une structure claire, ce qui est fondamental chez Bach. Il y eut un moment après le introduction ce qui était un désastre. On aurait dit que ça avait bien commencé, mais ensuite ça s’est à nouveau embrouillé », explique León.

L’objectif du Lab et de l’Orchestre RTVE était d’interpréter pour la première fois une pièce symphonique créée par l’intelligence artificielle. EL PAÍS a accompagné différentes étapes du processus et s’est entretenu avec plusieurs protagonistes. Les deux dernières pièces ont été jouées au début d’un concert déjà programmé au Théâtre Monumental le 17 novembre. “Pour la première fois dans l’histoire de ce théâtre, nous allons commencer par une petite expérience et, à la fin, nous révélerons le mystère”, a déclaré au public l’arrangeur Borja Arias, qui a également dirigé la formation de ces deux pièces. Le premier a été retranscrit tel qu’il avait été créé par l’IA, le second a été arrangé pour avoir plus de sens. Lorsqu’il eut terminé, il révéla l’astuce : « Les deux œuvres que vous venez d’entendre ont été composées par une intelligence artificielle », a-t-il déclaré. Le public a alors prononcé un « Ooohh” long. Ils ont été surpris par la nouveauté, mais pas impressionnés par l’œuvre d’art.

Musique avec emojis

Le Lab RTVE a documenté le processus appelé « Lab Orquesta » et ils le racontent aussi bien à la télévision, à la radio et sur le web que dans des pièces natives pour leur chaîne TikTok et d’autres réseaux depuis ce mardi. Ils ont examiné divers outils pour créer de la musique avec l’IA. Un seul soutenait des demandes de texte élaborées, qui donnaient des résultats irréguliers. Il en existe d’autres déjà disponibles qui permettent uniquement de décrire la requête avec des étiquettes ou des emojis, et qui renvoient quelque chose de moins élaboré.

L’IA est devenue un outil de création de textes et d’images depuis 2022, aux côtés de ChatGPT et d’autres outils graphiques tels que Dall-E ou Midjourney. Les musiciens ont vu de près ce processus, mais dans leur secteur ils n’ont pas connu une telle explosion : « Ce que nous allons demander à la machine, c’est de construire, dans la mesure où elle le peut et sait le faire, une composition musicale. » a-t-il expliqué, Manuel Ventero, directeur général de l’Orchestre, au début du processus. “Nous sentons que le résultat sera, dans le pire des cas, très bon”, a-t-il ajouté.

Mais la complexité de la musique classique pose un défi encore plus compliqué à la machine : c’est une chose de remplir l’arrière-plan d’une vidéo YouTube, une autre de créer une œuvre interprétée par des dizaines de musiciens. Le processus a montré que, pour l’instant, l’IA n’a pas encore les capacités de Mozart ou de Bach, ni même celles d’un étudiant appliqué en composition : « Elle fait des choses très immatures », explique Arias. Ils ont également essayé un outil d’intelligence artificielle pour transcrire la musique, mais cela s’est mal passé.

“C’est plus Indiana Jones”

Les demandes (ou instructions) des responsables de l’orchestre et des journalistes du RTVE Lab ont d’abord élaboré des idées, comme cela se fait par exemple avec les illustrations. Les propositions aspiraient à ce que la machine combine compositeurs, genres et instruments. Mais l’IA produisait des sons désordonnés, comme un puzzle ingouvernable. Le premier jour de test, en septembre dernier sur la scène du Théâtre Monumental, indiquait déjà que cela n’allait pas être facile : « C’est plus Indiana Jones », « il y a des influences ici ». reggaetoneras», « ce n’est pas une fuite » ou « il ne comprend pas ce langage », furent quelques-uns des commentaires de cette séance.

Après une trentaine de tests, les responsables du projet se sont finalement contentés d’une requête très standard pour obtenir un résultat acceptable : « Un morceau de musique à orchestrer pour un orchestre symphonique par un compositeur humain ». La musique était médiocre et laissait les compositeurs tranquilles : l’IA ne leur supprimera pas leur emploi, pour l’instant.

Le travail humain reste indispensable. L’arrangeur Borja Arias a reçu environ 20 minutes de musique créée par l’IA rassemblée en dix morceaux. L’un l’a transcrit et un autre l’a arrangé : « J’ai essayé de comprendre ce qu’il voulait me dire. » [la máquina], j’ai pris peu d’éléments, car il y en avait beaucoup”, dit-il. C’est ainsi qu’Arias compare ce qu’il a reçu de la machine avec d’autres arts : « La cohérence musicale est abstraite et difficile à réaliser. Quand on compose, il faut s’en tenir à un style. Cette pièce avait de nombreuses contributions et on ne savait pas d’où elles venaient. C’était comme s’il commençait à vous raconter l’histoire d’un protagoniste qui est pompier et puis tout d’un coup, il continuait à vous raconter l’histoire d’un charpentier, puis d’une bouquetière et enfin d’un juge », explique-t-il.

Le projet RTVE prévoyait que les musiciens de l’orchestre ne connaîtraient pas l’identité de l’auteur jusqu’à la fin. Ils ont répété et joué la pièce comme si elle était anonyme. Les journalistes du laboratoire ont interviewé les membres de l’orchestre avant qu’ils n’apprennent la vérité. Ils sentaient quelque chose d’étrange, sans savoir quoi : « La première œuvre [creada por IA y solo transcrita] Je ne l’ai pas aimé du tout, mais bon, c’est vrai aussi que nous l’avons lu une fois », a déclaré le trompettiste Borja Antón après la première répétition. “Peut-être qu’avec un peu plus de lecture et de travail, nous pourrons lui donner un peu plus de forme, mais c’est un travail un peu basique.” Lorsqu’on lui dit qui avait composé la pièce, il ne fut guère surpris : « Pas mal de choses me conviennent. Le premier travail était très mauvais. Il n’y avait nulle part où mener le concept. Dans la seconde [arreglada por Arias] La mélodie est plus entraînante, la structure est mieux réalisée », a-t-il ajouté.

Utile pour s’inspirer

Pour les oreilles expertes des artistes, il était évident que quelque chose n’allait pas : « Si cela ne vous semble pas familier, cela pourrait ressembler à un mélange de musiques de film qui tentent ensuite d’être plus classiques puis contemporaines, mais sans être innovant. C’est un pastiche. Ce n’était pas désagréable à écouter, c’est vrai. J’imaginais que les musiciens allaient penser que c’était un compositeur médiocre », explique León, le subdélégué artistique.

Pour une raison quelconque, l’IA a plus de mal à créer quelque chose de significatif sur le plan musical pour un orchestre : « Il y a des choses dont l’intelligence artificielle ne sait pas qu’elles sont très difficiles à jouer. Il y a un do aigu qui y reste longtemps. C’est impossible à faire. Physiquement, ce n’est pas possible. Et puis, il n’y a pas de plans différents, tout se fait d’un seul coup : on entend la mélodie avec l’harmonie en même temps et on ne reconnaît rien », explique le trompettiste Antón.

La difficulté de la musique classique ne doit pas nécessairement se répéter dans d’autres styles. “Pour composer de la musique symphonique, la vérité est qu’il vous reste beaucoup de choses”, explique l’arrangeur Arias. «Cela m’a laissé assez calme et cela a également démontré la valeur de ce type de musique en raison de sa complexité harmonique et contrapuntique et d’un message assez profond. Avec d’autres styles, l’IA est un peu plus proche d’un résultat optimal. Cela me laisse serein car il y a encore place à l’amélioration.

Ce manque de complexité ne l’empêche pas d’être également un outil utile pour inspirer les compositeurs dans leur travail ou pour imaginer des œuvres moins sophistiquées, selon León : « Les compositeurs pourraient en tenir compte comme une petite aide et ne pas se retrouver face à la page blanche. Pour donner un air de composition cinématographique, l’IA peut servir de moment musical remplissant, d’ambiance. Pas pour un orchestre, qui est quelque chose de plus profond et de plus riche.

Vous pouvez suivre Technologie EL PAÍS dans Facebook oui X ou inscrivez-vous ici pour recevoir notre bulletin d’information semanal.

_