La musique IA fait-elle vibrer ? | Twist | ARTE

On peut produire une chanson pop de qualité appréciable en 2 minutes, avec une qualité telle qu'il est difficile de faire la différence entre ce qui est réel et ce qui ne l'est pas.

• Nos chansons préférées sont-elles depuis longtemps générées par la machine ? • Que signifie l'IA pour la musique ? • Y aura-t-il une floppée de tubes stériles ou de nouvelles possibilités créatives ?

Il existe certainement des façons très inspirantes et ludiques d'utiliser l'IA autrement, et peut-être ça va changer la manière de composer en travaillant avec un partenaire hybride.

Certains craignent qu'une bonne partie de l'âme de la musique ne reste sur le carreau, et se demandent si l'IA est une bénédiction ou une malédiction.

An Liang est pianiste et enseignante à la Hochschule für Musik de Munich, pianiste depuis l'âge de 12 ans, mais les concerts traditionnels ne lui ont plus suffi car c'était comme une roue de hamster.

• Elle remet tout en question, y compris son propre parcours • Elle recherche le pourquoi avant tout : pourquoi est-elle musicienne et le fait-elle de la manière la plus honnête possible ? • Elle veut faciliter l'accès à la musique classique aux autres

Elle développe des formats de concert dépouillés des rituels guindés de la musique classique pour attirer un nouveau public, en travaillant avec le compositeur et spécialiste de l'IA qui a développé Lilia.

Lilia a été entraînée avec beaucoup de musique classique et a progressivement appris comment travaillaient les compositeurs d'avant. L'ordinateur n'a besoin que d'une petite phrase musicale pour continuer la composition.

On a encore besoin d'humain pour composer. L'original c'est l'humain en fin de compte. Lilia ne peut se baser que sur ce que nous lui donnons, donc la créativité vient de nous.

• Lilia propose de nombreuses options pour intervenir activement dans la musique • Les musiciens décident du style et de l'inspiration • Lilia peut distinguer les styles et adapter la composition selon les demandes (Beethoven, Debussy, Bach)

Après un court moment de réflexion, Lilia propose 5 échantillons de la suite possible de la nouvelle œuvre, et les deux musiciens choisissent la variante qu'ils préfèrent.

C'est comparable à la construction d'un Lego : on a toutes les briques mais ça peut toujours donner un autre résultat. Lilia se sert de données auxquelles elle a accès et construit quelque chose de nouveau.

Un ordinateur insensible peut-il écrire une musique qui nous touche ? Lilia n'est pas sentimentale et n'a pas d'émotion, mais la musique qui en résulte n'est pas dénuée d'émotion pour autant.

Ce qui est déterminant c'est que dans le domaine de la musique classique, l'humain donne vie à la musique en tant qu'être vivant.

L'humain a besoin de se exprimer et de jouer devant un public. Lilia n'éprouve pas ce besoin, et c'est ce qui nous différencie.

An Liang confie la tâche de terminer l'écriture du morceau. Les données deviennent des notes et le morceau composé numériquement retourne au bon vieux piano.

La question se pose : Lilia sera-t-elle un jour en mesure de créer par elle-même ? Pour cela il faudrait qu'elle soit curieuse.

La curiosité est quelque chose que l'on considère comme absolument humain. Si l'IA développait une jour une quelconque curiosité sans qu'un humain ne soit derrière qui lui indique la tâche concrète, il y aurait de quoi avoir peur.

• Scénario d'horreur : Lilia crée de manière autonome sans contrôle humain • Opportunité pour la création : Lilia reste un outil au service de la créativité humaine

La discussion se poursuit à Saint-Mandé près de Paris chez un pionnier de la musique IA qui compose devant son piano préparé.

C'est une sorte de stratégie oblique qui va faire changer de point de vue et écouter ou faire différemment.

• Benoît Carré, alias Skig, compositeur et auteur • Lilia est comme son double, une sorte d'alter ego • Il compose sa musique avec des ordinateurs depuis toujours

Sous le pseudonyme de Skig, il publie le premier album IA au monde, résultat d'un projet de recherche qui attire beaucoup d'attention et suscite des réactions diverses allant du scepticisme à l'euphorie.

Une chanson fait un carton avec 6 millions de streams : Magic Man, un hit inattendu.

La question se pose : est-ce qu'il va y avoir un nouveau son ? Quelque chose de vraiment nouveau avec l'IA ? Qu'est-ce que ça fait comme son ?

• Skig a créé un modèle d'une voix en mélangeant plusieurs enregistrements • Il a pris des enregistrements de London de Sinatra et d'autres voix qu'il adore • Quand il charge le modèle, sa voix est transformée de façon très expressive

Ce qui était pas prévu initialement pour les voix fonctionne aussi avec d'autres instruments. Skig adore faire ces découvertes car c'est comme une découverte d'un nouveau son.

Depuis toujours les machines le fascinent. Quand il était enfant, il était en osmose complètement avec les machines, c'était une osmose créative, quelque chose qui donnait de nouveaux pouvoirs.

Avec des chansons comme Melancolia, Skig se produit aussi en live. La musique est composée à l'ordinateur. Il aime ce mélange entre la musique et la statistique, entre la musique et les mathématiques.

La nouveauté avec Lilia c'est peut-être que ça va changer un peu la manière de composer. On va être avec un partenaire, une espèce de punk qui n'a pas trop de connaissance musicale mais qui est hyper doué.

• Un partenaire qui n'a aucun ego mais qui fait des trucs très bizarres • Parfois c'est bien • Lilia est une sorte d'adversaire dans le processus créatif • C'est un ping-pong des idées qui motive

Les gros logiciels de musique IA sont surtout orientés vers le commercial et proposent des outils capables de créer des morceaux formatés presque en temps réel, ce qui peut être problématique.

La dystopie c'est la suite du streaming, c'est la surabondance de titres qui sortent comme ça, des flots infinis de musique générée.

• Les plateformes de streaming ont des playlists qui sont de la musique fonctionnelle • Musique pour conduire, musique pour faire le ménage, musique pour se détendre • C'est très compatible avec Lilia qui peut générer à l'infini des pistes comme ça

Le danger c'est un problème de diversité. Lilia est entraînée sur de la musique en général plutôt mainstream, et tout ce qui est musique un peu plus singulière peut être un peu effacée de ces modèles d'IA.

C'est contre cela que Skig se bat. Il utilise Lilia différemment, cherche de nouvelles sonorités, fusionne un instrument brésilien de samba avec une fugue de Schubert modifiée.

Pour cette chanson, la chanteuse canadienne Grimes a prêté sa voix comme échantillon pour Lilia.

Il se partage les royalties de la chanson avec la chanteuse, créant un modèle potentiel d'avenir pour la musique IA.

À l'avenir, est-ce que Lilia créera de la musique qui nous touche ou va-t-elle surtout encombrer nos playlists de déchets ?

Pour Skig cela dépend de notre curiosité : celle des auditeurs et celle des compositeurs. Ce que tout le monde cherche quand il veut créer quelque chose de nouveau c'est de se surprendre.

Rania grandit à Los Angeles dans une famille stricte et apprend le piano et le violon dès l'âge de 4 ans. Elle est destinée à devenir pianiste, mais dans sa famille la musique classique était la seule acceptable.

• La musique devient un espace où elle commence à ressentir un sentiment de rébellion • Elle se sent terriblement bloquée de ne pas pouvoir jouer d'un instrument comme elle veut • Elle tombe en dépression et refuse de devenir pianiste, au point de ne plus vouloir toucher à un morceau de musique

Rania abandonne et quitte les États-Unis. Elle commence à faire de la musique électronique en 2015, c'est le début de ses expériences avec Lilia.

Avec sa toute première expérience, c'était juste avec sa voix. Elle avait un modèle qui intégrait sa voix en 2 jours et demi et générait une mélodie de 10 heures.

Elle tire son premier album Wire sur lequel elle chante en duo avec sa propre voix générée par Lilia.

• N'avait jamais entendu de son comme ça • Il n'avait aucune référence • Ce qui signifiait qu'elle avait carte blanche pour faire tout ce qu'elle voulait

C'était vraiment libérateur. C'était très chargé d'émotions comme toutes ses créations musicales. Au début elle avait une approche scientifique, voulait comprendre son propre processus créatif, et c'est devenu finalement très cathartique du point de vue émotionnel.

Cette exploration était une libération, une façon de se comprendre elle-même à travers la création musicale avec l'IA.

Portrait XO travaille actuellement à son prochain album et a développé un nouveau modèle de Lilia basé sur sa voix et sa musique.

• Elle en joue comme d'un instrument • Elle chante en direct dans son modèle de Lilia • Elle joue avec les différentes textures jusqu'à ce qu'elle entende quelque chose d'intéressant qu'elle va garder

Parfois ça deviendra le point de départ de sa composition. Ce n'est pas le genre d'utilisation de Lilia comme un plugin qui va juste générer une chanson.

Il s'agit de libérer la créativité, c'est-à-dire d'améliorer les compétences existantes des musiciens, pas de les remplacer.

D'autres artistes peuvent acheter son modèle Lilia, et 50% des recettes sont reversées à Rania Kim.

Le modèle de Rania était un exemple de la manière dont on peut faire progresser toute la culture autour de l'IA et de la création musicale de manière significative en conservant le rôle de l'artiste.

• C'est l'artiste qui décide des données à utiliser pour créer le modèle • C'est l'artiste qui choisit de les utiliser en privé ou de les partager avec le public • L'artiste garde le contrôle complet

Même dans le cas de la composition assistée par l'IA, les problèmes de droits d'auteur, de transparence et de respect des prestations créatives se posent.

Les musiciens qui travaillent avec Lilia souhaitent que les choses soient claires dans l'utilisation des données et des droits.

• On pourrait prouver pour établir un copyright que tel ensemble de données a été utilisé pour entraîner ce modèle • On pourrait prouver que c'est moi qui ai généré cette musique • On pourrait prouver que telle chanson en est sortie

Cela pourrait devenir une sorte de protection. Il n'y a pas de mal tant qu'on peut prouver chaque étape du processus, ce qui pourrait générer un copyright valide.

Il faut voir les choses de façon plus nuancée car utiliser Lilia comme Suno ou Udio ce n'est pas du tout comme utiliser un générateur de voix classique.

Portrait XO se dirige vers la scène de la Maison des cultures du monde de Berlin avec le violoniste américain Dan Gould pour une performance live.

En temps réel, Rania mixe le violon seul et sa voix avec son modèle Lilia, créant une performance hybride.

• Ça a un côté surnaturel • C'est comme si on ne pouvait pas situer dans l'espace et le temps • La musique classique traditionnelle fait pleurer, celle-ci n'a pas du tout touché pour être honnête

C'est le côté inattendu qui fascine, qui captive. Quelque chose de nouvelle et d'imprévu dans l'expérience musicale.

La question se pose : peut-on raisonnablement craindre que Lilia finisse par remplacer les artistes ?

• On ne peut pas imaginer avoir envie de payer pour aller voir un groupe de robots ou un hologramme jouer sur scène • On veut voir des musiciens avec les outils qui sont les leurs • On veut voir leurs petites mains faire des trucs • On veut ressentir l'énergie qu'ils donnent

C'est ça qu'on va vouloir de plus en plus : la présence authentique, l'humain, l'émotion ressentie directement.

Il y a longtemps que Lilia compose des chansons, mais l'avenir dépendra de comment on l'utilise : remplacement ou complément.

Un artiste qui prend une tout autre direction avec la technique qui est en expansion. Il revient de plus en plus au rôle instrumental de l'IA.

Il a actuellement le plus grand plaisir à ne voir l'ordinateur que comme un support d'enregistrement. C'est vraiment tout simple.

Prenons les instruments en main parce que nous décharge de trop de décision. Il faut reprendre le contrôle créatif.

Adam est musicien guitariste et producteur de musique à Vienne, surtout connu pour travailler avec le groupe autrichien Bilderbourg.

Bilderbourg pratique une arrogance décontractée dans un mélange de rock indépendant et de hip hop.

En 2013, il lance une nouvelle vague d'ostropop et de zébo. Adam y est pour beaucoup dans ce succès.

• On travaille avec des artistes qui interprètent leur propre musique • On est plutôt un élément d'accompagnement • On essaie d'être un guide, un sparring partner

Adam a beaucoup contribué au succès de cette nouvelle vague non seulement par le talent et la créativité mais aussi par de nombreuses années de travail acharné et de développement personnel des musiciens.

On ne pense pas qu'une IA aurait pu faire ça parce que ça va bien au-delà des sons.

• L'IA ne peut pas toucher quelqu'un d'autre • C'est à partir du contact qu'arrive un sentiment • C'est ce qui différencie la créativité authentique de la génération artificielle

Dans son tube Bologna, le groupe indie autrichien Vanda a saisi en quelques lignes le ressenti d'une génération entière avec une profondeur émotionnelle.

4 ans plus tard on écrit une certaine ligne avec toute la charge émotionnelle et les expériences vécues qui y sont attachées. C'est ce que l'IA ne peut pas reproduire.

Adam accompagne le groupe en tournée après que le clavériste du groupe soit mort peu après le père du chanteur Marco.

• Adam la ressent profondément, il a la chair de poule • Il sait combien de fois ils se sont assis et ont parlé de la mort du père de Marco et d'autres pertes • C'est ce qui se passait dans leur vie à l'époque

L'une de ses tâches principales est d'aider ces artistes à traverser une période difficile car ils ont décidé de réagir à cette période par la musique.

La musique est un moyen d'expression, un exutoire pour les humeurs et les sentiments. Les grandes chansons de l'histoire de la musique sont nées de moments de tristesse mais aussi de joie.

Pour Zebo Adam, l'état d'âme a une énorme influence sur l'inspiration et la multitude de décisions prises lors de la création et de la production de musique.

Le fait que de plus en plus de musique soit faite par des machines soulève la question : y a-t-il beaucoup d'âmes de sa musique qui passent à la trappe ?

• Nous utilisons tous les mêmes 12 notes • Nous utilisons tous les mêmes rythmes • Nous utilisons tous le même matériau de base

Comment rendre cette musique colorée et vivante ? Comment transformer le matériau universel en quelque chose d'unique qui reflète l'état d'âme de l'artiste ?

Né dans une famille de musiciens, Zebo Adam découvre dès l'enfance à quel point la musique peut remplir sa vie.

• Son père est le fondateur de la Hallucination Company, un projet de théâtre rock viennois • Sa mère fait elle aussi partie du groupe • La musique était omniprésente dans son environnement familial

La Hallucination Company a été un tremplin pour les futures stars de l'ostropop, dont Hans Hölzel, connu sous le nom de Falco, et Hansy Lang.

Falco a été avec Hansy Lang l'apparition la plus charismatique de la scène musicale autrichienne mais a mené une vie débridée marquée par la toxicomanie. Il meurt en 2008 à seulement 53 ans.

Le voilà de retour grâce à Lilia dans un album posthume. Zebo Adam y a participé et il a été produit par Thomas Rabl, ami et compagnon de longue date de Falco.

• Quand Falco nous a quitté, Lisa sa fille a donné tout son héritage musical à Thomas • C'était resté 10 ans quelque part dans un tiroir • C'était trop proche émotionnellement

Comme les possibilités techniques le permettent maintenant, Thomas Rabl prend le matériel en main à l'aide de Lilia pour extraire la voix de Falco des anciennes bandes, des mots, l'original.

Il met le matériel original dans Lilia et si y a assez de matière, le programme lui sort quelque chose de similaire à la voix originale de Falco.

Avec le playback musical, cela donne une interprétation où on entend Falco chanter à nouveau, ressuscité numériquement par Lilia.

C'était un plaisir pour Thomas Rabl de pouvoir enfin jouer avec la vraie voix de Falco, faire de la musique avec sa voix authentique.

• On entend chaque respiration, chaque souffle, chaque sourire • Chaque expression est rendue et améliorée bout par bout • L'IA capture les nuances vocales

Le matériel n'a pas été truqué ou manipulé pour changer la nature de la performance, mais plutôt complété et enrichi.

• Lilia peut-elle restituer ce que l'on croyait perdu ? • Ou trop de choses disparaissent de l'original ? • Jusqu'où peut-on aller ?

Est-ce une bénédiction ou une malédiction ? Ça dépend beaucoup de la manière dont on l'utilise, de ce qu'on en fait.

On peut s'en servir, on peut l'utiliser de manière constructive et créative pour améliorer, enrichir et prolonger la création musicale.

L'important c'est que nous écoutons et composons avec elle. C'est tout ce qu'il faut pour qu'en jaillisse une musique intéressante et qui nous touche.