ChatGPT devient paresseux et OpenAI le sait. Mais si vous lui proposez un pourboire (ou si vous lui dites que vous n’avez pas de doigts), il fera mieux

Ces dernières semaines, il y a eu plusieurs messages divers utilisateurs avoir partagé en X ou Reddit pour se plaindre ChatGPT devenait paresseux. Plus précisément, cela semble se produire avec GPT-4 dans ChatGPT Plus. Ceux qui l’utilisent affirment que leurs réponses « sont devenues beaucoup plus courtes qu’auparavant. Elles sont vagues et génériques, et manquent de détails et de nuances ». Il existe même de petites études statistiques qui ils semblent confirmer cette dégradation dans les réponses.

OpenAI lui-même, responsable de sa création, a reconnu être conscient du problème théorique. « Nous n’avons pas mis à jour le modèle depuis le 11 novembre » indiquer dans son message sur

Sur le compte officiel ChatGPT X indiquer également « Ce n’est pas que le modèle ait changé de quelque manière que ce soit depuis le 11 novembre. C’est simplement que les différences dans le comportement du modèle peuvent être subtiles. Seul un sous-ensemble d’invites peut être rétrogradéet les clients et les employés peuvent mettre beaucoup de temps à remarquer et à corriger ces tendances. »

L’entreprise a également révélé dans des messages ultérieurs à quel point la formation de ce type de modèle n’est pas un processus industriel classique : même si un modèle est formé plusieurs fois avec exactement les mêmes données, le résultat peut être « des modèles sensiblement différents en termes de personnalité ou de style de fonctionnement ». « écrire », par exemple.

Chez OpenAI, ils effectuent des tests d’évaluation détaillés et des tests A/B, et après avoir vu les résultats, ils décident si ces mises à jour du modèle améliorent ou non son comportement. « Ce processus ressemble moins à la mise à jour d’un site Web avec une nouvelle fonctionnalité qu’à un effort artisanal de plusieurs personnes pour planifier, créer et tester un nouveau modèle de chat avec un nouveau comportement. » ils expliquent.

Le pourboire… est-ce que ça marche ?

Ceux qui détectent cette dégradation des réponses depuis un certain temps ont également découvert de curieuses façons d’essayer de faire en sorte que ChatGPT se comporte à nouveau comme avant ces problèmes théoriques.

Cela a été déclaré par un utilisateur X appelé thebes (@voooooogel) qui révélé après un suggestion précédente Quoi si vous avez demandé à ChatGPT de faire quelque chose et ajouté une proposition de pourboirele comportement du chatbot s’est amélioré.

Dans ses tests, cet utilisateur lui a demandé de générer le code d’une fonction de conversion avec la bibliothèque PyTorch, sans plus attendre. Il a réitéré cette demande avec trois variantes : l’une, indiquant explicitement qu’il n’allait pas lui donner de pourboire. Un autre, qu’il allait lui donner 20 dollars pour la solution parfaite. Et un autre, qu’il allait lui donner 200 $ pour la solution parfaite.

Évidemment, il ne lui a pas donné de pourboire, mais après analyse des réponses constaté que les réponses étaient plus longues et détaillé plus le pourboire proposé est important.

Il existe d’autres astuces qui semblent fonctionner si les réponses fournies par ChatGPT Plus ne sont pas satisfaisantes. Par exemple, évitez d’utiliser GPT-4 et utilisez la version « classique », basée sur GPT-3.5, comme il le prétend développeur Paul Calcraft.

Il existe également des solutions plus imaginatives qui frisent l’absurde. Un autre développeur, Christian Bager Bach Houmann, expliqué qu’il a vérifié comment s’il disait à ChatGPT que Il n’avait pas les doigts pour écrire le code que j’avais demandé., le chatbot s’est mieux comporté. Aussi qu ‘ »il avait 100 grand-mères qui mourraient s’il échouait » avec la réponse.