Un groupe artistique français utilise les ondes cérébrales et l'IA pour recréer des paysages
L’image hypercolorée d’une colline sombre et d’une coulée de lave est assez jolie, mais ses origines en matière d’intelligence artificielle de haute technologie la rendent spéciale.
Il s'agit du produit des ondes cérébrales d'un membre du collectif d'art français Obvious, collectées dans un appareil IRM de l'Institut du Cerveau de l'hôpital de la Pitié Salpêtrière à Paris.
« Je pensais beaucoup à un volcan », a déclaré Pierre Fautrel, l'un des trois.
Il admet que l'œuvre qui en résulte n'est pas exactement ce qu'il avait en tête, « mais elle a conservé les éléments de base : une montagne enflammée avec de la lave qui coule et un paysage sur fond clair ».
Le trio de trentenaires Fautrel, Hugo Caselles-Dupre et Gauthier Vernier s'était déjà fait connaître à l'échelle internationale en 2018 en vendant pour plus de 400 000 euros une œuvre générée par l'IA chez Christie's à New York.
Pour leur dernier projet, « Mind to Image », ils ont utilisé un programme open source, MindEye, capable de récupérer et de reconstruire des images visualisées à partir de l'activité cérébrale, en les combinant avec leur propre programme d'IA pour créer des œuvres d'art.
Ils ont essayé deux versions différentes : l’une dans laquelle ils regardaient des images et essayaient de les reproduire simplement grâce à leurs ondes cérébrales capturées par l’IRM.
Ils ont également essayé de recréer leurs images inventées sur la base de descriptions écrites.
Pour chacun, ils ont répété le processus plusieurs fois pendant 10 heures afin de créer une base de données pour leur IA.
Reconstruire des images « imaginées »
« Nous savons depuis une dizaine d'années qu'il est possible de reconstruire une image observée à partir de l'activité du cortex visuel », explique Alizée Lopez-Persem, chercheuse au Brain Institute.
« Mais pas une image 'imaginée', c'est un véritable défi. »
Il a fallu de nombreuses heures à l’équipe pour trier les données collectées par l’IRM, avant qu’Obvious ne les intègre à son propre programme d’IA, ce qui lui confère une ambiance spécifique influencée en partie par le surréalisme.
« Il y a deux ans, je n'aurais jamais cru que cela pouvait exister », a déclaré Charles Mellerio, neuroradiologue qui a contribué au projet.
Il attribue d’énormes progrès dans la qualité de l’imagerie médicale, ainsi que l’émergence soudaine de l’IA générative, capable de créer des images à partir de messages écrits.
« Il existe des liens très réels entre l'art et la science », a déclaré Caselles-Dupré, tout en reconnaissant que cette technologie « peut faire très peur si elle est utilisée à mauvais escient ».
Les résultats de leur projet seront exposés à la galerie Danysz à Paris en octobre et le groupe affirme vouloir étendre le projet au son et à la vidéo.