Elon Musk et xAI tiennent leur promesse et ouvrent leur chatbot Grok en Open Source. C'est un modèle gigantesque
Il y a quelques jours, Elon Musk a publié un tweet assurant que Grok serait publié en Open Source cette semaine-là. Hier, juste au moment où le délai touchait à sa fin, la promesse a été tenue et le code et les données liés à Grok est désormais public et Open Source.
Grâce à cette version, les développeurs et les chercheurs disposeront d'une nouvelle option lorsqu'ils travailleront avec des modèles d'intelligence artificielle. Les références claires en matière de recherche jusqu'à présent étaient Mixtral (de la startup française Mistral AI) et surtout Llama 2, le LLM de Meta.
Ce dernier modèle est gratuit à rechercher, mais il existe des limites lorsqu'il s'agit de son utilisation commerciale et les développeurs doivent payer une commission pour les utilisations de masse. C’est-à-dire ceux dans lesquels il y a plus de 700 millions d’utilisateurs quotidiens.
Mais ici Grok se distingue par une section fondamentale, qui n'est autre que sa taille. C'est gigantesque. Comme l'indiquent les responsables de xAI dans leur entrée sur le blog officiel, cette version du projet est celle d'un modèle 314B, c'est-à-dire avec 314 000 millions de paramètres.
En tenant compte du fait que Llama 2 possède 65 000 millions de paramètres, Grok est presque quatre fois plus grandce qui peut théoriquement vous apporter des avantages en termes de précision de vos réponses et de votre interaction.
Ce projet est disponible à la fois dans son code – sur GitHub – et dans ses « poids », qui sont un peu comme les synapses du cerveau humain, et qui sont proposés sous la forme d'un gigantesque fichier de plusieurs centaines de Go disponible via un lien magnétique. La licence utilisée est Apache 2.0 qui permet une utilisation commerciale.
Il y a un élément manquant dans le projet : les données utilisées pour entraîner le modèle, ce qui permettrait d'analyser et de peaufiner encore mieux le comportement du modèle pour différents scénarios.
Lorsqu’Elon Musk a annoncé le lancement de Grok, il l’a fait en précisant que seuls les abonnés X pourraient l’utiliser. Les premières analyses ont indiqué que le comportement du modèle n'était pas supérieur à celui de ChatGPT, et la seule chose qui le différenciait était le ton sarcastique avec lequel Grok répondait dans son interaction textuelle avec les utilisateurs.
Images | Justin Pacheco
À Simseo | OpenAI accuse Musk de vouloir la fusionner avec Tesla et de vouloir un contrôle total : la bataille juridique ne fait que commencer
