Adobe a dévoilé « Project Music GenAI Control », un nouvel outil d'intelligence artificielle générative qui vous aide à créer de la musique à partir d'une simple invite de texte.

Il s'agit de la dernière avancée d'Adobe dans ce domaine depuis la sortie de son modèle texte-image Firefly l'année dernière et pourrait trouver sa place dans Premiere Pro à l'avenir.

Surnommé « Photoshop pour la musique » par les chercheurs d'Adobe, il va au-delà des autres outils de conversion de texte en musique en ajoutant des contrôles plus fins au processus, permettant ainsi un son mieux adapté à votre projet.

Qu’est-ce qu’Adobe Project Music GenAI Control ?

Le Project Music GenAI Control d'Adobe a été conçu par Adobe Research pour devenir un co-créateur de musique, plutôt qu'un outil en soi permettant de créer une piste de bout en bout comme certains des autres modèles musicaux génératifs d'IA.

Nous avons déjà vu un certain nombre de modèles de synthèse texte-musique de qualité variable, notamment MusicFX de Google, Stable Audio de StabilityAI et l'audioCraft open source de Meta. Vous disposez également de la création complète de chansons de Suno, Cassette AI et Splash Music.

Cependant, Adobe affirme que son outil donne plus de contrôle à l'utilisateur final, lui permettant de créer des styles, des sons et même des pauses adaptés à n'importe quel projet.

Nicholas Bryan, chercheur scientifique principal chez Adobe Research, a déclaré : « Cela aide les gens à créer de la musique pour leurs projets, qu'il s'agisse de diffuseurs, de podcasteurs, ou de toute autre personne ayant besoin d'un son parfaitement adapté à l'ambiance, au ton et à la durée. »

Comment fonctionne Adobe Project Music GenAI ?

L'outil d'Adobe vous permet de contrôler le motif de la chanson

Comme d’autres outils de ce type, celui-ci est basé sur un modèle d’IA de base. Il a été formé sur une gamme de sons et de styles musicaux, puis un nouveau flux de travail a été construit sur le modèle pour faciliter l'édition des pistes qu'il produit.

Dans une démonstration de l'outil, vous pouvez voir une invite de texte demandant un style de musique spécifique, puis des invites supplémentaires pour modifier l'intensité, ajouter des superpositions de style ou introduire des instruments supplémentaires, le tout s'appuyant sur la génération d'origine.

Il peut également générer des pistes en boucle et des boucles spécifiques à intégrer dans un mix plus large. Vous décrivez simplement à quoi vous voulez que cela ressemble et l'outil en fait une réalité.

« L'un des aspects les plus intéressants de ces nouveaux outils est qu'ils ne se contentent pas de générer de l'audio : ils les amènent au niveau de Photoshop en donnant aux créatifs le même type de contrôle approfondi pour façonner, peaufiner et éditer leur audio. C'est une sorte de contrôle au niveau des pixels pour la musique », a déclaré Bryan.

Où utiliserons-nous Adobe Project Music GenAI Control ?

Il s’agit actuellement d’une fonctionnalité expérimentale exploitée par Adobe Research. C'est aussi pourquoi le nom peut sembler maladroit : ce n'est pas encore un vrai produit.

Cependant, Project Music GenAI Control correspond au style d'autres projets Adobe Labs, notamment Project All of Me pour l'édition de tenues AI ou Project Beyond the Seen pour créer des panoramas à 360 degrés à partir d'une image 2D.

Même lorsqu’il sortira du laboratoire, il est peu probable qu’il s’agisse d’un outil en soi. Il pourrait être considéré comme le « Photoshop de la musique », mais en réalité, il fera partie d'un produit Adobe plus large.

Il est possible qu'Adobe lance une version autonome dans le cadre de son offre de studio de podcast, un peu comme il l'a fait avec Firefly pour les images, mais l'accès principal se fera dans Premiere Pro pour ajouter une musique à un film ou mettre une piste d'accompagnement sur un clip vidéo. .