Une bande VHS, une IA et huit secondes d'audio. C'est tout ce dont une femme avait besoin pour récupérer sa voix perdue

À un moment donné des années 90 à une jeune Sarah Ezekiel, ils l'ont enregistrée avec une caméra vidéo et ont enregistré cet enregistrement sur une bande VHS. Dans cette petite apparition de Sarah, il n'a parlé que huit secondes, mais près de trois décennies plus tard, ces huit secondes ont fini par être un cadeau incroyable.

Celui qui a ramené sa voix.

Sara Ezekiel a perdu sa voix en 2000, avant que les smartphones ne deviennent massifs et nous permettent, entre autres choses, de capturer facilement des vidéos.

Une maladie de la motoneurone a provoqué que la capacité et la mobilité dans ses mains perdaient juste au moment où il allait avoir son deuxième enfant, un enfant appelé Eric. Comme je l'ai indiqué dans une interview de la BBC, « je pensais que ce serait bien, mais après la naissance d'Eric, je me suis rapidement détérioré. » En quelques mois, il a perdu le contrôle de ses mains, et peu de temps après, il était incapable de tout type de conversation intelligible.

Son mariage s'est terminé peu de temps après, et Sarah, sous la garde de ses deux enfants, s'est retrouvée dans une situation terrible. Eric, maintenant âgé de 25 ans, se souvient de sa mère paralysée. Aviva, sa fille de 28 ans, se souvient quand elle a réalisé que sa mère était différente. « J'ai ce souvenir de lui demander de préparer des fraises et de voir qu'il n'a pas pu les couper. Il a dû demander à quelqu'un. »

Cinq ans après le diagnostic, Sarah a trouvé une pause grâce à la technologie de suivi des yeux. Il pouvait construire des mots et des phrases avec le mouvement des yeux, afin qu'un synthétiseur vocale offre une voix synthétique similaire à ce que Stephen Hawking a utilisé.

Ce fut le début d'une nouvelle vie qui s'adapte avec joie. Il est devenu un bénévole de l'association à affecter par sa maladie et a de nouveau peint grâce à cette même technologie. Et quelques années plus tard, une petite étape a commencé à prendre forme.

L'IA et le « miracle » du clonage de la voix

Une entreprise appelée SmartBox avait annoncé qu'elle allait fournir des voix clonées gratuites à un million de personnes à risque de perdre leur voix ou à celles qui l'avaient déjà perdu en raison de maladies telles que le cancer ou celle de l'émentieurone.

Ils ont demandé à Sarah un enregistrement de voix pour la reconstruire, mais la seule chose que Sarah avait était une vieille bande VHS dans laquelle ils avaient enregistré sa fille Aviva et dans laquelle elle parlait à seulement huit secondes.

Cet enregistrement était un désastre. La qualité de l'image était mauvaise, mais elle est également déformée, avec des gens se mélangeant lors de la parole et une télévision en sondant à plein volume. Simon Poole, l'un des responsables de Smartbox, a pensé que ce ne serait pas possible.

Cependant, Poole a réussi à isoler la voix de Sarah grâce à l'application de l'isolateur vocal de ElevenLabs, une entreprise spécialisée dans ce type de solutions. Le problème est que le résultat manquait d'intonation et de personnalité, et avait également un étrange accent américain. Pour essayer de le résoudre, il a utilisé une autre application formée avec des milliers de voix pour remplir des trous de ce type d'enregistrements et cela pourrait aider à récupérer une voix comme celle de Sarah.

Après avoir obtenu un résultat qu'il croyait approprié, il a envoyé plusieurs phrases à Sarah avec sa voix clonée. Il a appelé et entendu comment Sarah, entendant ces phrases, a presque éclaté pour pleurer. L'un des vieux amis de Sarah, qui l'a rencontrée avant de perdre sa voix, a été « impressionnée par la réaliste qu'il sonnait ».

Sa fille Aviva a dit qu'il était également impressionné même s'il a admis qu'il devait s'habituer à elle. « L'entendre maintenant quotidiennement me surprend toujours. » Pour Eric « , cela a fait une différence incroyable », car cette voix peut également inclure une intonation qui montre que votre mère est joyeuse ou en colère.

Sarah manque sa voix authentique, mais comme elle l'a dit, « Je suis heureuse d'être de retour. C'est mieux que d'être un robot. »

Image | Gabriel Petry | Ursula Castillo

Dans Simseo | L'IA était déjà en mesure de cloner des voix et des visages. Maintenant, clonons aussi notre façon d'écrire