Amazon développe son propre ChatGPT. Il s’appelle « Olympus » et il est encore plus ambitieux que GPT-4
Microsoft, Google et Facebook ont gagné beaucoup de terrain dans la course à l’intelligence artificielle, mais les deux autres grandes entreprises technologiques, Apple et Amazon, restent à la traîne. Aujourd’hui, l’un d’eux a fait un pas en avant et l’a fait de manière considérable.
Olympe. C’est le nom du grand modèle de langage (LLM) sur lequel ils travaillent chez Amazon, et qui selon Reuters, qui cite des sources proches du projet, vise à rivaliser avec les meilleurs modèles d’OpenAI ou d’Alphabet.
Deux milliards de paramètres. L’ambition d’Amazon est ici énorme, comme le montre le fait que selon ces sources, l’entreprise utilise un modèle avec deux milliards de paramètres, un chiffre étonnant qui est estimé au double de celui utilisé, par exemple, avec GPT-4. DANS GPT-3, par exemple, le chiffre était de 175 milliards, nous envisageons donc un LLM qui serait 10 ordres de grandeur plus élevé à cet égard. Plus il y a de paramètres, plus le modèle de langage est précis et puissant.
Au-delà d’Alexa. Rohit Prasad est à la tête de l’équipe, qui dirigeait auparavant l’équipe Alexa chez Amazon et relève directement du PDG Andy Jassy. Prasad est le scientifique de la division Intelligence générale artificielle (AGI) d’Amazon et il a recruté des chercheurs qui ont travaillé à la fois sur Alexa AI et sur l’équipe scientifique d’Amazon pour développer leurs modèles de formation.
Efforts antérieurs. Amazon disposait déjà d’un modèle plus petit appelé Titan, mais il ne semblait pas particulièrement intéressé à concurrencer d’autres LLM. En fait, en avril, ils ont annoncé Bedrock, une API neutre et ouverte qui permet aux entreprises et aux développeurs de travailler avec différents modèles en utilisant l’infrastructure d’Amazon.
Et juste au cas où, Anthropic. Le développement d’Olympus s’inscrit dans un autre effort supplémentaire récemment déployé par Amazon : non seulement il travaille sur son propre LLM, mais il a investi 4 milliards de dollars dans Anthropic, la société responsable du chatbot Claude.
Aucune date estimée. Il n’y a pas de date de lancement définie pour Olympus, mais selon des sources proches du projet, l’entreprise estime que disposer de ses propres modèles d’IA rendra son offre sur AWS (Amazon Web Services) plus attractive pour les clients professionnels qui souhaitent accéder aux solutions les plus puissantes. modèles. . La formation d’Olympus nécessitera sans aucun doute d’énormes ressources, et il sera intéressant de voir jusqu’où l’entreprise peut aller.