L’IA se classe parmi les 1 % supérieurs pour sa pensée créative originale

Une nouvelle recherche de l’Université du Montana et de ses partenaires suggère que l’intelligence artificielle peut égaler le 1% des meilleurs penseurs humains lors d’un test standard de créativité.

L’étude a été dirigée par le Dr Erik Guzik, professeur adjoint de clinique au College of Business de l’UM. Lui et ses partenaires ont utilisé les Torrance Tests of Creative Thinking, un outil bien connu utilisé depuis des décennies pour évaluer la créativité humaine.

Les chercheurs ont soumis huit réponses générées par ChatGPT, l’application alimentée par le moteur d’intelligence artificielle GPT-4. Ils ont également soumis les réponses d’un groupe témoin de 24 étudiants de l’UM qui suivaient les cours d’entrepreneuriat et de finances personnelles de Guzik. Ces scores ont été comparés à ceux de 2 700 étudiants à l’échelle nationale qui ont passé le TTCT en 2016. Toutes les soumissions ont été notées par Scholastic Testing Service, qui ne savait pas que l’IA était impliquée.

Les résultats ont placé ChatGPT en compagnie d’élite pour la créativité. L’application d’IA se situait dans le centile supérieur pour la fluidité – la capacité à générer un grand nombre d’idées – et pour l’originalité – la capacité à proposer de nouvelles idées. L’IA a un peu glissé – jusqu’au 97e centile – pour la flexibilité, la capacité à générer différents types et catégories d’idées.

« Pour ChatGPT et GPT-4, nous avons montré pour la première fois qu’il se classe dans le top 1 % pour l’originalité », a déclaré Guzik. « C’était nouveau. »

Il a été ravi de constater que certains de ses étudiants de l’UM se sont également classés parmi les 1 % les plus performants. Cependant, ChatGTP a surpassé la grande majorité des étudiants à l’échelle nationale.

Guzik a testé l’IA et ses étudiants au cours du semestre de printemps. Il a été assisté dans ses travaux par Christian Gilde de l’UM Western et Christian Byrge de l’Université de Vilnius. Les chercheurs ont présenté leurs travaux en mai lors de la conférence sur la créativité de la Southern Oregon University.

« Nous avons été très prudents lors de la conférence pour ne pas trop interpréter les données », a déclaré Guzik. « Nous venons de présenter les résultats. Mais nous avons partagé des preuves solides que l’IA semble développer une capacité créative égale ou même supérieure à la capacité humaine. »

Guzik a déclaré avoir demandé à ChatGPT ce qu’il indiquerait s’il fonctionnait bien sur le TTCT. L’IA a donné une réponse ferme, qu’ils ont partagée lors de la conférence :

« ChatGPT nous a dit que nous ne comprenions peut-être pas pleinement la créativité humaine, ce qui, je pense, est correct », a-t-il déclaré. « Cela a également suggéré que nous pourrions avoir besoin d’outils d’évaluation plus sophistiqués capables de différencier les idées générées par l’homme et celles générées par l’IA. »

Il a déclaré que le TTCT est un matériel propriétaire protégé, de sorte que ChatGPT ne pouvait pas « tricher » en accédant aux informations sur le test sur Internet ou dans une base de données publique.

Guzik s’intéresse depuis longtemps à la créativité. Alors qu’il était élève de septième dans la petite ville de Palmer, dans le Massachusetts, il participait à un programme destiné aux élèves talentueux et doués. Cette expérience lui a fait découvrir le processus de résolution des problèmes futurs développé par Ellis Paul Torrance, le psychologue pionnier qui a également créé le TTCT. Guzik a déclaré qu’il était tombé amoureux du brainstorming à cette époque et de la façon dont il puise dans l’imagination humaine, et il reste actif au sein de l’organisation Future Problem Solving, rencontrant même sa femme lors de l’une de ses conférences.

Guzik et son équipe ont décidé de tester la créativité de ChatGPT après avoir joué avec au cours de la dernière année.

« Nous avions tous exploré avec ChatGPT, et nous avons remarqué qu’il faisait des choses intéressantes auxquelles nous ne nous attendions pas », a-t-il déclaré. « Certaines des réponses étaient nouvelles et surprenantes. C’est alors que nous avons décidé de le mettre à l’épreuve pour voir à quel point il est vraiment créatif. »

Guzik a déclaré que le test TTCT utilise des invites qui imitent des tâches créatives réelles. Par exemple, pouvez-vous penser à de nouvelles utilisations pour un produit ou améliorer ce produit ?

« Disons que c’est un ballon de basket », a-t-il déclaré. « Pensez à autant d’utilisations d’un ballon de basket que vous le pouvez. Vous pouvez le tirer dans un cerceau et l’utiliser dans un présentoir. Si vous vous forcez à penser à de nouvelles utilisations, peut-être que vous le découperez et l’utiliserez comme jardinière. Ou avec une brique, vous pouvez construire des choses, ou elle peut être utilisée comme presse-papier. Mais peut-être que vous la broyez et la transformez en quelque chose de complètement nouveau.

Guzik s’attendait à ce que ChatGPT soit bon pour créer beaucoup d’idées (fluidité), car c’est ce que fait l’IA générative. Et il a excellé à répondre à l’invite avec de nombreuses idées pertinentes, utiles et précieuses aux yeux des évaluateurs.

Il a été plus surpris de voir à quel point cela produisait des idées originales, ce qui est une caractéristique de l’imagination humaine. Les évaluateurs de test reçoivent des listes de réponses courantes pour une invite, celles qui sont presque censées être soumises. Cependant, l’IA a atterri dans le centile supérieur pour avoir proposé de nouvelles réponses.

« Lors de la conférence, nous avons appris des recherches antérieures sur le GPT-3 qui avaient été effectuées il y a un an », a déclaré Guzik. « A cette époque, ChatGPT n’obtenait pas d’aussi bons résultats que les humains sur les tâches qui impliquaient une réflexion originale. Maintenant, avec le GPT-4 plus avancé, il se situe dans le top 1 % de toutes les réponses humaines. »

Avec l’accélération des progrès de l’IA, il s’attend à ce qu’elle devienne un outil clé pour le monde des affaires à l’avenir et un nouveau moteur important d’innovation régionale et nationale.

« Pour moi, la créativité consiste à faire les choses différemment », a déclaré Guzik. « L’une des définitions de l’entrepreneuriat que j’aime est qu’être entrepreneur, c’est penser différemment. L’IA peut donc nous aider à appliquer le monde de la pensée créative aux affaires et au processus d’innovation, et c’est tout simplement fascinant pour moi. »

Il a déclaré que l’UM College of Business est ouvert à l’enseignement de l’IA et à son intégration dans les cours.

« Je pense que nous savons que l’avenir inclura l’IA d’une manière ou d’une autre », a déclaré Guzik. « Nous devons faire attention à la manière dont il est utilisé et tenir compte des règles et réglementations nécessaires. Mais les entreprises l’utilisent déjà pour de nombreuses tâches créatives. En termes d’entrepreneuriat et d’innovation régionale, cela change la donne. »