L'installation de ChatGPT sur notre PC ou ordinateur portable n'est pas encore possible.  Mais nous avons déjà une alternative

Vous pouvez également former votre propre ChatGPT depuis chez vous. Tant que vous avez 35 000 euros, bien sûr

La révolution suscitée par ChatGPT n’est pas bon marché : on apprenait il y a quelques jours que Microsoft avait investi des centaines de millions de dollars pour acheter des cartes graphiques NVIDIA A100 afin qu’OpenAI puisse entraîner son modèle puis l’intégrer à Bing. Il semblait donc que seules les grandes entreprises pouvaient accepter de créer leur propre ChatGPT, mais les choses ont changé.

Nuage NVIDIA DGX. Cette entreprise Vient d’être annoncé ce service qui vous permet de louer des versions virtuelles de leurs serveurs DGX, dont chacun dispose de huit NVIDIA H100 ou A100 et de 640 Go de mémoire. Si le client en a besoin, le service peut évoluer jusqu’à 32 000 GPU, mais il est presque préférable de ne pas penser au coût de cette option car celle de base avec ces huit cartes graphiques hautes performances est très, très chère. NVIDIA a un récif potentiel ici.

35 000 euros par mois. Plus ou moins cela (36 999 $) est ce que coûte un mois de location du service de base avec le NVIDIA A100. Cette option, disent-ils chez NVIDIA, permettra au client qui l’optera d’avoir un « accès réservé à plein temps » aux GPU qu’il loue et qu’il n’aura à partager avec personne. Un serveur DGX coûte environ 200 000 $, par exemple.

Les modèles de formation coûtent une fortune. L’investissement que Microsoft a fait pour former Bing avec ChatGPT et lui faire « ingérer » d’énormes quantités de données puis en « apprendre » est énorme, mais on savait déjà que ce type de processus a un coût très élevé. L’année dernière, Google nous a parlé de votre modèle PALMavec 540 000 millions de paramètres (plus il y en a, plus le modèle est précis et meilleur), et selon certaines estimations, il en coûte pour l’entraîner entre 9 et 23 millions de dollars. Le modèle LLaMA de Meta, par exemple, a été formé pendant 21 jours sur 2 048 GPU NVIDIA A100, ce qui coûter cher environ quatre millions de dollars. Autres études lancer chiffres similaires pour les modéliser avec environ 175 000 millions de paramètres.

Peu à peu des options émergent. Cependant, le service NVIDIA donne accès à toute personne disposant de ressources suffisantes – sans avoir à être un Microsoft – pour créer et former son propre ChatGPT. MosaicML, une société spécialisée dans ce domaine, a proposé il y a des mois un processus pour créer un chatbot avec la qualité de GPT-3 pour moins de 500 000 $.

semer pour récolter. Cet énorme investissement dans la formation de ces modèles est ce qui signifie logiquement maintenant que des entreprises comme OpenAI, qui sont nées avec une philosophie ouverte et à but non lucratif, ont complètement changé pour un modèle d’entreprise avec beaucoup de secret et dans lequel le revenu est probablement va croître de manière significative, notamment avec le lancement de GPT-4 et de son API. Microsoft, qui a annoncé son copilote pour sa plate-forme Microsoft 365, le proposera comme un côté à coût élevé pour les entreprises qui souhaitent tirer parti de ces capacités dans les applications et les services de cette suite.

A Simseo : Je n’ai aucune idée de la programmation mais grâce à GPT-4 j’ai créé un clone de Flappy Bird