IA dans la musique – 1

La musique est aussi un terrain de jeu pour l’intelligence artificielle

Pour commencer, écoutons une musique composée par une IA.

Retrouvez un ensemble de compositions sur : Created with AIVA

Our sophisticated A.I. judges your awful taste in music.

Bon j’avoue que je n’ai pas testé cette application : je n’ai pas de compte spotify. Pas contre, mes deux monstres (21 et 25 ans) était mort de rire après s’être amusé avec cette fonctionnalité !

Application disponible sur : Judge-my-spotify

Entreprises qui associent l’IA à la musique

Flow Machines

Financé par le Conseil européen de la recherche et coordonné par François Pachet (Sony CSL Paris – UMPC), Flow Machines a pour but de rechercher et de développer des systèmes d’intelligence artificielle capables de générer de la musique de manière autonome ou en collaboration avec des artistes humains. Le cabinet de recherche déclare qu’ils transforment le style musical, qui peut provenir de compositeurs individuels – de Mozart à Abbas – ou de sources multiples, en un objet de calcul, qui peut être lu, reproduit et travaillé par l’IA. C’est cette société qui a dévoilé la première chanson pop d’AI, « Daddy’s Car ».

Références :

• Site de François Pachet
• Flow Machines, le logiciel qui fera de vous un Bob Dylan
  Publié sur 01Net le 21 mai 2014 par Amélie Charnay
• Flow Machines, l’intelligence artificielle du laboratoire Sony, produira-t-elle les tubes pop de demain ?
  Publié sur France24 le 1er octobre 2016 par Louise Wessbecher
• Sony CSL Flow Machines

LANDR

One of the most interesting emerging technologies in music is LANDR which claims to provide instant audio mastering service as it combines AI with music production. LANDR works by computing each new song by analyzing the production style. The AI software is constantly learning as people keep uploading their tracks for mastering, sort of like a observant baby with a clean slate.

Every time a user uploads a track, LANDR creates a custom ‘digital fingerprint’ of the track, which it then cross references with its database to identify the track’s genre and production style. Then, based on the needs of the user’s track, it applies a custom set of adaptive tools like multi-band compression, EQ, stereo enhancement, limiting and aural excitation. It then makes subtle, intelligent frame-by-frame adjustments based on the unique properties of the track.

Flash : LANDR propose un plugin permettant aux musiciens d’enregistrer simplement des sessions à plusieurs et à distance.
Je reviendrai avec plus de précisions. « https://www.mac4ever.com/actu/161115_sessions-un-plugin-pour-faire-de-la-musique-en-visioconference-par-landr

AI Duet

Google AI Experiments

Last year search engine giant, Google launched A.I. Experiments that showcases Google’s artificial intelligence research through web apps that anyone can test out (open source). The portal was meant to make machine learning technology more accessible to people who are interested in AI but do not have the technical background. Basically, the site lets people interact with AI projects that Google researchers have created and also lets users create their own projects/ experiments with AI involved.

One of the projects on the AI Experiments page is the AI Duet, which showcases the application of machine learning on music. It lets the user play a duet with the computer, one has to play some notes, and the computer will respond to the melody. The application allows the use of keyboard, computer keys, or even plugging in a MIDI keyboard.

AI Duet takes notes while the user is playing a key and runs it through a neural network that has been trained using machine learning with hundreds of different melodic examples. The neural network looks for melodic and rhythmic patterns it can identify, and matches it with the user’s key. It then times it and generates its own organic melody which sounds like a response to the input key/ melody.

AI Experiments states that, Yotam Mann, known for ‘making music with code’ has built the project, with friends from the Magenta and Creative Lab teams at Google. It’s built with Tensorflow, Tone.js, and open-source tools from the Magenta project, which is Google’s foray into art using AI.

Site : Experiments with Google – ai-duet

Amper Music

Démarche :

1. Choisissez le genre et la durée 🎛
2. L’IA fait votre musique 🤖
3. Modifiez et ajustez jusqu’à ce que se soit parfait ✌️
4. Téléchargez pour l’utiliser dans votre projet 😎️

Une autre petite composition … Pour le plaisir

Retrouvez un ensemble de compositions sur : Created with AIVA

Ecrett Music

AIVA

ORB Composer

Attention : logiciel payant – environ $ 99.00

Amadeus Code

Je n’ai pas tester cette application, mais vous pouvez vous rendre sur le site : Amadeus Code.

Brain.fm

Créé au Japon, Alter est un androïde qui tient le double rôle de chef d’orchestre et de chanteur dans l’opéra « Scary Beauty ». Une performance visuelle et sonore.

Il a la gestuelle d’un chef d’orchestre et la voix d’un castrat : le robot Alter révolutionne l’opéra et les relations homme-machine lors de concerts-performances transgenres aux frontières du réel. Sur scène, pas de chef d’orchestre à la baguette virevoltante ni de ténor en queue de pie pour la première de l’opéra « Scary Beauty », mais un être étrange, aux avant-bras et au visage humains plantés sur un corps hyper-articulé de machine. Ce robot humanoïde est la création de quatre experts japonais en intelligence artificielle, chacun dans son domaine : les professeurs Hiroshi Ishiguro pour la robotique et Takashi Ikegami pour les logiciels, le musicien d’électroacoustique Shintaro Imai et le compositeur d’avant-garde Keiichiro Shibuya pour le son.

La suite sur : Musique : quand l’intelligence artificielle donne le « la »
publié sur Paris Match le 2 février 2021 par Barbara Guicheteau

Could a computer really assess a pianist’s skill level with human accuracy?

A new study claims this artificial intelligence can judge a musician’s pianistic talents just by watching a video of them tickling the ivories.
Brendan Morris, an assistant professor in Electrical and Computer Engineering at the University of Nevada, Las Vegas, led the study which examined 61 piano performance videos on YouTube.

Firstly, Morris asked a trained pianist to manually grade every pianist’s skill level on a 10-point scale. On the scale, based on a syllabus developed by the Music Teachers National Association, levels 1-9 signify a pre-collegiate skill level, with level 10 representing a collegiate or post-collegiate mastery. The researchers used half these videos and their assigned grades to train a neural network, creating an AI that can assess piano playing from just a video…

En français :

Un ordinateur pourrait-il vraiment évaluer le niveau de compétence d’un pianiste avec une précision humaine ?

Une nouvelle étude affirme que cette intelligence artificielle peut juger des talents pianistiques d’un musicien simplement en regardant une vidéo le montrant en train de chatouiller l’ivoire. Brendan Morris, professeur assistant en génie électrique et informatique à l’Université du Nevada, à Las Vegas, a dirigé l’étude qui a examiné 61 vidéos de performances de piano sur YouTube.

Dans un premier temps, Morris a demandé à un pianiste formé de noter manuellement le niveau de compétence de chaque pianiste sur une échelle de 10 points. Sur cette échelle, basée sur un programme d’études développé par l’Association nationale des professeurs de musique, les niveaux 1 à 9 correspondent à un niveau de compétence précollégial, le niveau 10 représentant une maîtrise collégiale ou post-colégiale. Les chercheurs ont utilisé la moitié de ces vidéos et les notes qui leur ont été attribuées pour former un réseau de neurones, créant ainsi une IA qui peut évaluer le jeu du piano à partir d’une simple vidéo…

Vous êtes en mal d’inspiration pour écrire les paroles d’une chanson ? L’IA vient à votre secours !

Generated songs will appear here! Use the form to configure the parameters and press Generate Song to get your own lyrics!

• The first song might take 2 or 3 minutes since it requires to load the AI model. After that it should become faster.
• Even keeping all the parameters the same it’s going to generate a new song every time.
• Keywords might be ignored sometimes, specially if those contain words or phrases not so common on standard songs. You can always try generating again the song if you are not happy with it.
• You can use the results for any commercial or non commercial product, just remember to mention the website in the credits.

En français :

• La première chanson peut prendre 2 ou 3 minutes car elle nécessite de charger le modèle d’IA. Après cela, elle devrait devenir plus rapide
• Même en gardant tous les paramètres identiques, cela va générer une nouvelle chanson à chaque fois.
• Les mots-clés peuvent parfois être ignorés, surtout s’ils contiennent des mots ou des phrases moins courants dans les chansons standard. Vous pouvez toujours essayer de générer à nouveau la chanson si vous n’êtes pas satisfait.
• Vous pouvez utiliser les résultats pour tout produit commercial ou non commercial, mais n’oubliez pas de mentionner le site web dans les crédits.

Essayez cet amusant, connectez-vous sur : Keywords to lyrics

Et maintenant :

Saisir quelques mots dans la case Keywords

Vous pouvez régler le ‘taux de créativité’ de l’IA
par la zone dédiée

Vous pouvez régler le ‘taux de répetitions’
par le curseur dédié

Lance la génération par le Bouton : Generate Song

Appréciez le résultat !

Une start-up canadienne a mis au point un algorithme qui peut retranscrire immédiatement sur un clavier n’importe quelle note entendue. Cela à travers les mains d’un pianiste virtuel mais virtuose, capable de jouer des pages impossibles pour le commun des mortels !

Attention les yeux !

Le message en préambule de la vidéo est clair : les images qui vont suivre peuvent déclencher une crise d’épilepsie. En effet, dès les premières secondes, on renonce à suivre les mains de ce pianiste virtuel se déplaçant à une vitesse ahurissante. Un fond lumineux, sur lequel chaque point correspond à une note, permet de réaliser la prouesse de l’exercice. Mais pas question ici de s’attaquer à des pièces de Rachmaninov, Liszt ou Bartok. On repassera pour la beauté de la partition – quoique certains entendront sans doute un chef-d’œuvre dans cette musique à la tonalité électronique et survoltée -, le défi est donc digital : interpréter une séquence MIDI comptant des milliards de notes, par définition tout à fait injouable par un pianiste normalement constitué.

Intelligence artificielle et réalité augmentée

On doit cette prouesse à une start-up canadienne qui porte bien son nom : Massive Technologies. Ses deux ingénieurs ont mis au point un algorithme capable de « lire » un fichier audio puis de le transformer en un fichier d’animation. Ledit fichier génère ensuite les mouvements du pianiste « avec une technique de jeu correcte et une animation cinématique précise de la main et du corps », explique Fayez Salka, l’un des fondateurs. Dernière étape, toutes ces informations peuvent être appliquées à un objet réel – un piano tant qu’à faire – ou virtuel dans un environnement lui aussi réel ou virtuel. Une technologie par conséquent aussi à l’aise dans la réalité virtuelle ou la réalité augmentée. Rien que ça.

Professeur de piano virtuel ?

Enfin, on ne voit pas comment cette technologie ne pourrait pas devenir très vite un outil indispensable de pédagogie. Une idée partagée par les cerveaux de Massive Technologies qui ont en effet bien l’intention de proposer dans un avenir proche un professeur virtuel dopé à l’IA, capable d’aider ses élèves à apprendre à jouer du piano.

Texte reproduit depuis : Injouable cette pièce pour piano ?
Publié sur Diapason le 5 mars 2021 par Paul Chevalier

Sniff Sniffffff ; Daft Punk n’est  plus …

Une part de ma jeunesse se ferme … Une de plus

Raison de plus pour apprécier ce clip vidéo ; merci l’IA !

La fiche Wikipédia : Daft Punk

La vidéo d’adieu : Daft Punk – Epilogue

The #1 DJ software for Windows, iOS et Android

Retrouvez toutes les information et descriptions sur : djay-pro

Article sur ce sujet : Cette application utilise l’intelligence artificielle pour séparer les pistes d’une chanson
Publié sur Presse-Citron le 24 juin 2020

Écoutez Power Gravy, une chanson de Iron Maiden écrite par une intelligence artificielle.

Cette chanson vient du YouTuber Funk Turkey, qui a utilisé un ensemble de paroles fournies par lyrics.rip – un service web qui creuse dans la base de données de Genius, puis assemble intelligemment les résultats en utilisant des algorithmes prédictifs pour composer une nouvelle chanson. Par la suite, il a ajouté de la musique, avant de chanter les paroles en imitant Bruce Dickinson. Le résultat est Power Gravy.

Ce n’est pas la première fois que Funk Turkey se frotte à l’IA.

Il y a quelque temps, il a réalisé une chanson de Metallica, Deliverance Rides, une autre de AC/DC, Great Balls, et il a créé The Nickelbot, qui a utilisé les mêmes techniques pour composer une nouvelle chanson de Nickelback, Nobody Died Every Single Day.

D’autre part, Funk Turkey accueille volontiers les suggestions pour de futurs projets. Écoutez son travail sur la droite.

Vocodes : Volez la voix de célébrités

Cette petite application vous permet de faire discourir une célébrité avec le texte de votre choix.

Maintenant, regardons l’interface :

1. Choisissez le domine qui vous intéresse
   Plusieurs sont disponible dans la liste déroulante
2. Choisissez la personnalité cible

Saisir votre texte dans la boite de dialogue.

Puis Cliquez sur le bouton « Speak »
ou « Cancel » pour annuler.

Voila, c’est aussi simple !

Quelques sources tout de même :

• Site : Vocodes
• Une sélection sur Youtube : Vo.codes
• Une liste de Fakes sur reddit : vocodes

Encore un outils pour les bricoleurs de Deep Fakes…

L’intelligence artificielle peut s’avérer utile dans bien des domaines. Dans tous les domaines, ou presque en vérité. Y compris pour créer de la musique. Björk aime explorer les nouvelles technologies dans ses compositions. L’artiste le prouve aujourd’hui une fois de plus.

Selon le communiqué publié par Microsoft, cette intelligence artificielle repose sur une caméra placée sur le toit de l’hôtel Sister City à New York City.

“Elle peut détecter et comprendre une grande variété d’objets avec une grande précision, et ce avec un haut niveau de détails. Il ne s’agit donc pas seulement de détecter des nuages mais aussi leur densité et leur type, qu’il s’agisse de cumulus ou de nimbus, par exemple. Et elle n’identifie pas simplement un oiseau, elle peut savoir s’ils sont toute une volée.”

L’IA adapte ensuite la musique de l’artiste en fonction de ce que la caméra voit. Le système est aussi suffisamment intelligent pour prendre en considération les prévisions météorologiques à quelques jours.

Passer au chapitre suivant : IA dans la musique – 2