Audio est le dernier outil musical d’intelligence artificielle à arriver sur le marché, sortant furtivement avec brio en dévoilant une étrange capacité à capturer l’émotion dans le chant synthétique.
Créée par d’anciens ingénieurs de Google DeepMind, la plate-forme a déjà attiré à la fois les investissements et l’attention de certaines parties de la communauté musicale, notamment will.i.am et Common.
Une poignée de pistes ont été pulguées avant le grand lancement sur X et d’autres plates-formes, ce qui a conduit à des spéculations sur la qualité de ce nouvel outil d’IA. Je l’essaie depuis un peu plus d’une semaine et à mon avis, c’est un moment à la Sora pour la musique IA.
Il a la même capacité de créer une piste complète à partir d’une invite de texte que Suno – qui reste un outil impressionnant – mais a des voix bien meilleures et un son plus naturel.
La capacité à capturer non seulement l’émotion d’une chanson, mais aussi à générer à la fois le bizarre et l’inattendu, tout en conservant la fidélité et la cohésion musicales, est stupéfiante. Par exemple, j’ai généré toutes les pistes de cette histoire, fusionnant facilement des genres inhabituels.
Qu’est-ce qu’Udio ?
J’ai eu la chance de discuter avec les fondateurs David Ding et Andrew Sanchez à propos d’Udio et ils m’ont dit que cela était inspiré par le désir de faciliter la création et le partage de musique.
« C’est un moment magique », a déclaré Sanchez. « C’est vraiment magique pour les gens de passer de zéro à quelque chose. » C’est pourquoi ils ont décidé de se concentrer, au moins au début, sur la possibilité de créer une chanson complète à partir d’un texte – pour donner les gens cet événement « wow ».
Les futures mises à jour incluront davantage d’outils axés sur les musiciens, notamment la possibilité d’ajouter des voix de référence, des options de création plus granulaires et une importation facile de pistes externes. Pour l’instant, l’accent est mis sur la création d’une bibliothèque de morceaux étonnants inspirés par des personnes ayant des capacités musicales nulles ou minimes.
Les futures mises à jour incluront davantage d’outils axés sur les musiciens, notamment la possibilité d’ajouter des voix de référence, des options de création plus granulaires et une importation facile de pistes externes.
Les deux partenaires ne s’appuieront pas sur l’architecture sous-jacente du modèle ou sur les données de formation, mais ont déclaré avoir mis en place de solides mesures de protection des droits d’auteur. Par exemple, vous ne pouvez pas référencer un artiste spécifique comme Suno, mais cela bloque également une piste si elle ressemble à un artiste.
Comment fonctionne Udio ?
Comme tout outil d’IA, cela commence par du texte. Vous tapez une invite et cliquez sur Générer et cela créera deux pistes complètement différentes pour ce thème. Cependant, vous pouvez également lui donner vos propres paroles, en faire un instrument ou ajouter des balises de genre plus spécifiques pour orienter la génération.
Après avoir joué avec pendant une semaine, j’ai trouvé que vous obteniez la génération la plus précise en lui donnant des paroles approximatives d’une ligne et une histoire qui oriente la direction du modèle de texte, puis un genre descriptif pour définir la direction du modèle musical.
Lorsqu’une piste est générée, la tâche est pisée, d’abord pour créer des paroles en utilisant un grand modèle de langage traditionnel, puis pour créer la musique en utilisant ce que je suppose être un modèle de transformateur de diffusion similaire à ceux trouvés dans Sora ou Stable Diffusion 3 d’OpenAI – bien que cela n’a pas été confirmé par l’équipe Udio.
Les utilisateurs peuvent ensuite publier le morceau pour que la communauté puisse en profiter, télécharger le fichier audio ou vidéo à partager sur d’autres plateformes de médias sociaux ou l’intégrer à un autre projet.
L’un des cas d’utilisation soulignés par l’équipe et certains des artistes avec lesquels ils ont travaillé est le potentiel d’utilisation d’Udio comme aide à l’écriture de chansons. Être capable de prendre un ensemble de paroles, de définir une mélodie et de créer une démo instantanée à envoyer aux artistes pour qu’ils soient enregistrés dans un vrai studio.
« Il s’agit d’une toute nouvelle Renaissance et Udio est l’outil de créativité de cette époque. Avec Udio, vous pouvez créer des chansons via l’IA et votre imagination », a déclaré will.i.am.
Dans quelle mesure Udio fonctionne-t-il ?
En moins d’une minute, j’ai pu créer un morceau de bluegrass gothique obsédant mais palpitant sur une hoedown hantée. J’ai pu sélectionner l’une des pistes générées et l’étendre avec des contrôles granulaires comme l’ajout d’une intro, d’un segment avant ou après ou d’une outro.
La mélodie résultante devrait être un mélange de genres mélangés, mais elle était étonnamment efficace. Le modèle d’IA a été capable de créer quelque chose de convaincant, d’original et quelque peu étrange, le tout à partir de texte.
L’équipe continue de découvrir de nouvelles compétences dont elle n’avait pas conscience qu’Udio possédait. « Récemment, j’ai réalisé qu’il pouvait jouer de la musique folklorique traditionnelle chinoise », a déclaré Ding. « J’ai entendu du bon coréen, du japonais et d’autres langues. »
Il s’agit d’une toute nouvelle Renaissance et Udio est l’outil de créativité de cette époque. Avec Udio, vous pouvez créer des chansons via l’IA et votre imagination,
William
« Il n’y a rien de disponible qui se rapproche de la facilité d’utilisation, de la qualité vocale et de la musicalité de ce que nous avons réalisé avec Udio – c’est un véritable témoignage des personnes que nous avons impliquées », a-t-il déclaré.
À l’avenir, ils travaillent sur l’ajout de la prise en charge d’un plus grand nombre de langues, la possibilité de séparer les pistes inpiduelles et potentiellement même la possibilité de spécifier le chanteur – mais pour l’instant, leur objectif est de créer une communauté autour d’Udio.
Une chose que nous avons pu constater est qu’Udio est utilisé comme alternative à l’envoi d’un gif. Ou permettre aux gens de s’exprimer sous la forme d’une chanson à un proche ou de partager une émotion. Vous pouvez envoyer un message de 30 secondes sur l’anniversaire d’un être cher au lieu d’envoyer une carte.
- J’ai eu un accès anticipé à LTX Studio pour réaliser des courts métrages sur l’IA
- Je viens d’essayer le nouvel outil vidéo Assistive AI – et son réalisme est incroyable
- Découvrez LTX Studio : je viens de découvrir l’avenir des outils vidéo d’IA qui peuvent aider à créer des films complets
