Amuse, un collaborateur de l’IA de l’écriture de chansons pour les compositeurs de musique
Ne serait-ce pas génial si les créateurs de musique avaient quelqu’un avec qui réfléchir, l’aider lorsqu’ils sont coincés et explorer différentes directions musicales? Des chercheurs de Kaist et de l’Université Carnegie Mellon (CMU) ont développé une technologie d’IA similaire à un autre auteur-compositeur qui aide à créer de la musique.
L’œuvre est publiée dans Actes de la Conférence du CHI 2025 sur les facteurs humains dans les systèmes informatiques.
Le système développé par l’équipe de recherche du professeur Sung-Ju Lee, Amuse, est un système basé sur l’IA qui convertit diverses formes d’inspiration telles que le texte, les images et l’audio en structures harmoniques (progressions d’accords) pour soutenir la composition.
Par exemple, si un utilisateur saisit une phrase, une image ou un clip audio tel que «Memories of a Warm Summer Beach», Amuse génère automatiquement et suggère des progressions d’accords qui correspondent à l’inspiration.
Contrairement à l’IA générative existante, Amuse est différencié en ce qu’il respecte le flux créatif de l’utilisateur et induit naturellement une exploration créative à travers une méthode interactive qui permet une intégration et une modification flexibles des suggestions d’IA.
La technologie principale du système AMUSUS est une méthode de génération qui mélange deux approches: un modèle grand langage crée un code musical basé sur l’invite et l’inspiration de l’utilisateur, tandis qu’un autre modèle d’IA, formé sur de vraies données musicales, filtre les résultats maladroits ou contre nature en utilisant l’échantillonnage de rejet.
L’équipe de recherche a mené une étude d’utilisateurs ciblant les musiciens réels et a évalué qu’Amuse a un potentiel élevé en tant que compagnon créatif, ou une IA co-créative, un concept dans lequel les gens et l’IA collaborent, plutôt que d’avoir une IA générative a simplement mis en place une chanson.
Le papier, dans lequel un doctorat. L’étudiant Yewon Kim et le professeur Sung-Ju Lee de la Kaist School of Electrical and Electronic Engineering et le professeur de l’Université Carnegie Mellon Chris Donahue ont participé, ont démontré le potentiel de la conception créative du système d’IA dans le monde universitaire et l’industrie.
Le professeur Sung-Ju Lee a déclaré: « La technologie de l’IA générative récente a soulevé des préoccupations dans la mesure où elle imite directement le contenu protégé par le droit d’auteur, violant ainsi les droits d’auteur du Créateur, ou générant des résultats à sens unique, quel que soit l’intention du créateur. En conséquence, l’équipe de recherche était consciente de cette tendance, a prêté attention au créateur. »
Il a poursuivi: « Amuse est une tentative d’explorer la possibilité d’une collaboration avec l’IA tout en maintenant l’initiative du Créateur, et devrait être un point de départ pour suggérer une direction plus conviviale dans le développement des outils de création de musique et des systèmes générationnaires d’IA à l’avenir. »
