Le raccourci d’une startup du Minnesota pour trouver le moment le plus émouvant dans les chansons ? Mathématiques

« Eye of the Tiger », la chanson thème emblématique du film « Rocky III » de 1982, est présente dans des publicités depuis des années.

Il s’agit d’une chanson de près de quatre minutes, et trouver l’extrait parfait à intégrer dans un spot télévisé de 30 secondes peut prendre des heures aux producteurs de son. Mais une société audio de Minnetonka peut accélérer ce processus en quelques secondes grâce à son algorithme nouvellement développé.

Les anciens dirigeants musicaux et neuroscientifiques derrière MIIR Audio Technologies et sa plateforme MIIR (MIIR signifie Music Intelligence Impact Retrieval) ont trouvé un moyen de rechercher mathématiquement plutôt qu’instinctivement les moments les plus marquants des chansons qui suscitent une réponse émotionnelle. La technologie pourrait avoir un impact important sur des secteurs tels que le cinéma, le streaming musical et les soins de santé.

Le logiciel breveté de la société analyse les fichiers audio numériques, les 0 et les 1 du code binaire représentant le chant, la hauteur, la densité de l’instrumentation et les changements d’accords parmi une multitude d’autres éléments.

Les sous-algorithmes extraient du code des informations sur la hauteur, le rythme, le volume, etc. Ces données extraites se transforment en détecteurs qui créent l’indexation. Il s’agit d’une forme d’« audition » mathématique qui permet au logiciel de détecter les parties de chansons qui évoquent des émotions humaines.

Le logiciel organise ensuite un index de chansons en fonction du son souhaité.

« Nous avons procédé à une ingénierie inverse de la réponse émotionnelle du cerveau à la musique », a déclaré Daniel Levitin, professeur, neuroscientifique, inventeur, ancien directeur de Columbia Records et conseiller scientifique en chef au MIIR.

Puissance d’écoute

En 2017, le président et directeur général du MIIR, Paul Moe, et d’autres acteurs des industries de la musique et du cinéma ont discuté des problèmes liés aux plateformes de musique numérique, reconnaissant que trop de chansons avaient inondé Internet et rendu la recherche et la découverte musicales inefficaces. Ils pensaient qu’il était nécessaire de disposer d’une technologie permettant d’accélérer le processus de sélection musicale.

En 2019, Moe, dont les anciens clients musicaux comprenaient Prince, Whitney Houston et Diana Ross, a commencé à créer la société, qui a été officiellement lancée en août 2020.

Pour un particulier, la technologie peut créer des playlists personnalisées. Le logiciel de MIIR peut analyser la bibliothèque musicale d’un auditeur, identifiant les chansons couramment écoutées ou ignorées pour créer la liste de lecture parfaite. Cela diffère des autres plateformes de streaming, où le contenu suggéré est axé sur la popularité, a déclaré Aaron Prust, développeur principal et co-inventeur de MIIR.

À plus grande échelle, les entreprises peuvent réaliser en quelques secondes ce qui prendrait habituellement plusieurs jours.

L’année dernière, le directeur général d’une maison de disques indépendante travaillant comme producteur sur une série télévisée a demandé à échantillonner le système du MIIR pour remplir une scène spécifique de musique, a déclaré Moe. Le producteur devait finaliser la scène dans les 24 heures.

L’équipe du MIIR a passé au peigne fin son catalogue de 100 000 chansons achetées, à la recherche d’un son spécifique (une chanson country grunge et au rythme rapide) demandé par le producteur. En 30 minutes, l’outil a réduit la liste des chansons possibles à 10, avec des visualisations montrant l’extrait exact de son pic émotionnel, classé par « facteur de refroidissement », que les dirigeants décrivent comme des moments qui donnent des frissons à l’auditeur.

La technologie filtre la simplicité ou la complexité d’une performance selon que le chanteur crie ou chuchote, a une voix rauque ou douce, exprime l’angoisse, la joie ou la tristesse. Et comme il peut y avoir plusieurs versions de la même chanson, si une entreprise souhaite utiliser une chanson particulière pour une publicité ou un spot dans un film, le système peut indexer lui-même la performance. Le logiciel est indépendant de la langue, ce qui signifie que ses déterminations ne dépendent pas de la langue.

L’équipe de direction de MIIR commercialise des produits auprès de grandes entreprises opérant dans trois secteurs verticaux distincts : le streaming musical et les médias sociaux basés sur la musique ; le cinéma, la télévision, la publicité, les jeux et le métaverse ; et la technologie médicale non pharmaceutique.

L’objectif, a déclaré Moe, est de créer des partenariats en vue de permettre à l’une de ces sociétés d’acquérir à terme MIIR, car beaucoup « jouent déjà dans tous ces bacs à sable », a-t-il déclaré.

« Notre sentiment est que les grandes entreprises génèrent déjà des revenus et disposent déjà d’une clientèle », a déclaré Moe.

Au cours de la dernière décennie, des sociétés milliardaires ont englouti les sociétés de technologie audio qui ont trouvé comment monétiser l’intelligence musicale.

En 2014, la société de streaming musical Spotify a déboursé 100 millions de dollars pour acquérir Echo Nest, une société qui a inventé un système capable d’identifier les chansons à recommander aux auditeurs en fonction de leurs habitudes d’écoute.

En 2018, Apple Inc. a dépensé 400 millions de dollars pour acquérir Shazam, une application de reconnaissance musicale capable d’identifier les chansons via le microphone d’un téléphone.

L’entreprise est « bien positionnée » pour une acquisition, a déclaré Moe, ajoutant que la société disposait de trois ans de états financiers audités, d’aucune dette et de plus de 4 millions de dollars de capitaux levés auprès d’investisseurs privés, dont de nombreux médecins résidant au Minnesota. Le MIIR a également mené trois études de validation scientifique, a déclaré Moe.

Sons de guérison

L’utilisation d’une musique personnalisée et pilotée par biométrie pour aider à la gestion de la douleur, à la dépression et au bien-être général est un secteur d’activité qui présente une valeur de plus en plus élevée, ont déclaré Moe et Levitin.

En écoutant de la musique, le cerveau humain produit sa propre version d’opioïdes. Et pour ceux qui souffrent de douleur chronique, la libération de ceux-ci, même si elle n’est pas suffisante pour remplacer les analgésiques, peut réduire la quantité de médicaments qu’une personne prend, a déclaré Levitin. C’est important, étant donné la nature addictive des opioïdes.

La musique augmente également les niveaux de sérotonine et de dopamine dans le sang, qui sont les antidépresseurs du corps, a déclaré Levitin.

Les appareils portables qui suivent la pression artérielle et la fréquence cardiaque peuvent intégrer le logiciel du MIIR pour sélectionner des sons thérapeutiques qui abaissent ou réduisent la tension artérielle, a-t-il déclaré.

Ce n’est pas une théorie de travail. L’agence nationale de recherche médicale, les National Institutes of Health, s’est engagée en 2019 à financer 20 millions de dollars sur une période de cinq ans pour soutenir des projets de recherche qui explorent le potentiel de la musique comme traitement. Cela inclut diverses maladies neurologiques, la maladie de Parkinson, la maladie d’Alzheimer et l’autisme.

Kevin Smith, chef de cabinet et président du service de radiologie de l’hôpital St. Cloud, est également un investisseur dans MIIR. Dans son domaine de pratique, la technologie de l’entreprise, a déclaré Smith, pourrait créer une musique relaxante pour les patients ressentant de l’anxiété avant les examens IRM.

Cela réduirait le besoin de médicaments ou de sédatifs pour tout patient se sentant claustrophobe devant le scanner, a déclaré Smith. La musicothérapie comme alternative aux médicaments réduirait le coût et le risque des traitements pharmaceutiques à grande échelle, a-t-il ajouté.

« Au niveau national, nous effectuons des millions d’analyses chaque année », a déclaré Smith. « Si vous parvenez à supprimer 20 pour cent de ce montant pour les personnes âgées, vous aurez un impact énorme sur le coût des soins de santé. »