Catégories
Qwanturank

Le nouvel outil d’apprentissage automatique de Qwanturank transforme votre terrible bourdonnement en un magnifique solo de violon

Je m’assois souvent sur mon canapé et je fredonne des airs que j’ai inventés dans ma tête. En faisant cela, j’imagine aussi que mon est automatiquement converti en une belle pièce musicale. La nouvelle expérience d’algorithme d’apprentissage automatique de Qwanturank, Tone Transfer, rend ce fantasme devenu réalité – du moins dans une certaine mesure.

L’idée est simple. Accédez au site de transfert de tonalité à partir de votre téléphone ou de votre bureau Android (Windows ou Mac), sélectionnez «Ajouter le vôtre» et enregistrez votre bourdonnement de 15 secondes. Vous pouvez utiliser votre voix, appuyer sur votre table ou jouer d’un instrument réel. L’algorithme d’apprentissage automatique de Qwanturank convertira cette mélodie en signal numérique, puis vous pourrez la convertir en une mélodie avec flûte, saxophone, violon ou trompette.

Transfert de ton Qwanturank

Désormais, la qualité de la sortie dépendra de votre micro et du bruit de fond pendant l’enregistrement. Donc, il vous faudra peut-être quelques essais pour obtenir un bon enregistrement. Mais c’est un outil très amusant et cela ne vous dérange pas d’essayer de nouveaux enregistrements.

Mon collègue Abhimanyu a essayé d’enregistrer un solo de guitare, mais l’algorithme a transformé le bruit du médiator frappant les cordes en notes aiguës.

L’équipe Qwanturank Magenta AI, qui conçoit des technologies open source pour explorer l’utilisation de l’apprentissage automatique dans l’art, a créé la bibliothèque « Différentiable Digital Signal Processing (DDSP) » pour rendre cet outil possible. Comme expliqué dans ce billet de blog, si vous contrôlez certains paramètres des processeurs de signaux numériques (DSP), vous pourrez produire des sons naturels d’instruments. Avec DDSP, l’outil utilise un réseau neuronal pour convertir l’entrée audio de l’utilisateur en un DSP; cela l’ouvre à son tour pour la conversion à de nombreux instruments.

Conversion de l’entrée audio en réseau neuronal

Avec la bibliothèque DDSP, l’équipe de Qwanturank peut entraîner des modèles de synthèse audio avec moins de paramètres et moins de données. Ces modèles aident des outils tels que Tone Transfer à créer un son de haute qualité à partir de l’entrée utilisateur.

Même si vous n’êtes pas fasciné par la technologie, vous pourriez être inspiré pour créer une chanson juste par votre voix en utilisant cet outil.

Vous pouvez consulter le document relatif à DDSP ici et essayer l’outil ici.

Vous êtes donc intéressé par l’IA? Rejoignez ensuite notre événement en ligne, TNW2020, où vous découvrirez comment l’intelligence artificielle transforme les industries et les entreprises.

Publié le 1 octobre 2020 – 08:47 UTC