qu’est-ce que c’est, comment ça marche, ce qu’il peut faire et comment tester ce modèle de langage par l’intelligence artificielle
Nous allons vous expliquer qu’est-ce que c’est et comment fonctionne PaLM 2, le modèle d’intelligence artificielle créé par Google pour Google Bard et d’autres de ses outils. C’est un concurrent direct de GPT-4, avec lequel Google veut que son système de chat concurrence ChatGPT et ChatGPT Plus.
Nous allons commencer par vous expliquer de manière générale ce qu’est ce modèle de langage d’intelligence artificielle, et nous essaierons de vous dire comment il fonctionne sans trop le compliquer, pour que tout le monde puisse le comprendre. Ensuite, nous vous donnerons quelques exemples de ce qu’il peut faire et comment le tester.
Que sont PaLM et PaLM 2
PALME est un modèle de langage par Intelligence Artificielle Créé par Google pour concurrencer GPT. Ces modèles sont le cerveau et le cœur des chats IA comme ChatGPT et comme Google Bard, c’est ce qu’il y a à l’intérieur de l’IA qui lui permet d’effectuer les interactions. Ses initiales signifient , qui est le nom du modèle.
Grâce à ces modèles, les salons de discussion en intelligence artificielle tels que Bard sont capables de tenir une conversation avec vous, de comprendre les phrases que vous lui dites et les demandes qu’il vous adresse, et vous répondre de manière naturelle et cohérente. Ces modèles sont ceux qui ont été entraînés pour permettre la réalisation de ces interactions.
PaLM est un système qui a été formés pour tenir des conversations avec n’importe qui dans les langues dans lesquelles il a été formé. Ses algorithmes analysent les mots que vous tapez, comprennent leur ordre, leur signification et interprètent ce que vous voulez dire, puis génèrent une réponse basée sur les informations avec lesquelles il a été formé.
PaLM 2 est la nouvelle version du modèle linguistique de Google, présenté le 10 mai 2023 lors de la conférence Google I/O. C’est le modèle que Google Bard utilisera désormais, et si Google affirmait que PaLM était trois fois supérieur au GPT-3, il faut s’attendre à ce que cette nouvelle version puisse se confronter directement au GPT-4.
Une autre caractéristique de PaLM 2 est qu’il sera disponible en quatre tailles : Gecko, Otter, Bison et Unicorn. L’idée est la polyvalence, avoir un Gecko si petit qu’il peut être utilisé sur des téléphones portables sans avoir besoin d’un grand matériel, et d’autres qui gagnent en puissance mais aussi en exigences.
Comment fonctionne PALM
Pour commencer, des modèles comme les modèles PaLM sont entraînés de manière intensive avec de grandes quantités de données. Les données sont collectées partout sur Internet et transmises à des algorithmes de formation afin que ce système linguistique apprenez à comprendre les choses que nous vous disonsayez en vous les informations avec les réponses, et parvenez à générer des réponses écrites qui soient naturelles.
PaLM utilise un modèle basé sur un réseau de neurones transformant, souvent appelé transformateur. Cela rend PaLM à un niveau de fonctionnement de base similaire aux modèles concurrents tels que les GPT d’OpenAI.
Ces types de modèles sont capables de prendre notre langue écrite et convertissez-le via des calques en un langage numérique qui peut « comprendre » l’intelligence artificielle. En plus de ces couches, ils travaillent également avec un grand nombre de paramètres pour leur processus d’apprentissage automatique.
Par exemple, PaLM utilise le système d’apprentissage automatique Pathways développé par Google pour former un modèle sur plusieurs pods d’unités de traitement de tenseurs. Il utilise une technique qui vous permet d’apprendre à partir d’un nombre limité d’exemples étiquetés, sans avoir besoin d’un grand nombre d’exemples. Cela vous permet de vous adapter rapidement et généraliser de nouvelles tâches ou classes avec un minimum de données étiquetées.
En tant que réseau transformateur, PaLM est capable de comprendre et de créer des modèles avec le contenu des invites que nous lui écrivons, à la fois du texte et du code. Au cours de son processus d’apprentissage, le modèle découvre des modèles statistiques et des connexions qui existent entre les mots et les phrases du contenu. Ces connaissances acquises permettent à PaLM de générer des réponses cohérentes et pertinentes dans des contextes variés.
Ce que vous pouvez faire avec ce modèle d’IA
Google a assuré que PaLM 2 Il s’est amélioré par rapport à son prédécesseur dans trois domaines majeurs. Allez, ce n’est pas seulement une amélioration générale de toutes ses capacités, mais ils se sont également concentrés sur la réalisation de trois types d’améliorations substantielles. Ce sont les suivants :
- Multi langue: PaLM 2 est formé avec des textes de différentes langues – plus de 100, disent-ils – et cela a considérablement amélioré sa capacité à comprendre, générer et traduire des textes – y compris des idiomes, des poèmes et des énigmes -, l’une des plus complexes problèmes à résoudre pour une IA. PaLM 2 réussit en effet les examens de compétence linguistique avec un niveau « master », dit-on chez Google.
- Raisonnement: La diversité de l’ensemble de données avec lequel PaLM2 a été entraîné comprend des études scientifiques et des sites Web contenant des expressions mathématiques. Cela a permis de gagner du terrain dans des domaines tels que la logique, le raisonnement de bon sens et les mathématiques.
- La programmation: L’accent a également été clairement mis sur l’inclusion de code source pour former le modèle, et selon Google PaLM 2 se démarque lorsqu’il s’agit d’écrire du code dans des langages comme Python ou JavaScript, mais il peut également générer du code spécialisé dans d’autres langages comme Prolog, Fortran ou Verilog.
Google a formé ce modèle sur toutes sortes de sources, y compris des documents Web, des livres, du code, des mathématiques et des données conversationnelles. L’ensemble de données avec lequel il a été formé a été significativement plus grand que celui de la version précédente, et inclus de nombreuses sources dans d’autres langues autre que l’anglais.
Avec tout cela, PaLM sera un spécialiste des langages et des codes, ce qui vous permettra d’analyser des extraits de code ou de trouver des bugs. Il peut également s’agir d’un traducteur beaucoup plus avancé que Google Translator, capable de traduire des expressions et des idiomes populaires.
PaLM 2 sera intégré à de nombreux services Google, donc les utilisations que vous pouvez en faire sont multiples. Pour commencer, vous pouvez l’utiliser sur Bard, le chat d’intelligence artificielle de Google, qui améliore savoir programmer étant l’un des points sur lesquels ils se sont concentrés pour l’améliorer.
Le modèle intégrera également dans Google Workspaceoù PalM 2 deviendra assistant permanent avec lequel vous pouvez faire votre travail plus rapidement. Cela signifie que vous aidera à rédiger des textes dans Gmail ou Docs mais aussi à d’autres tâches telles que mieux organiser les données dans Google Sheets.
Le modèle a également été appliqué au domaine de la cybersécurité à travers le soi-disant Sec-PaLM. Il s’agit d’une version adaptée et spécialisée dans la cybersécurité, qui permet d’analyser et d’expliquer le comportement de scripts potentiellement malveillants dans des lignes de code, et de détecter ceux qui représentent une menace pour les utilisateurs et les entreprises. Quelque chose comme un détecteur de script malveillant.
PaLM a également été adapté par Google pour avoir une version adaptée à la médecine. Cette version a été entrée par des équipes de recherche médicale dans Google, et il est promis qu’elle peut résumer des textes médicaux et répondre à de nombreuses questions médicales. Ils travaillent même sur des fonctions multi-modalités qui permettent d’analyser les informations des radiographies ou des mammographies.
Comment tester PaLM 2
La meilleure façon de tester ce modèle de langage est en utilisant Google Barde. Cependant, nous avons le problème que Bard n’est pas encore disponible en Europe, donc cela peut prendre du temps pour le tester.
Cependant, dans Basics, nous avons expliqué comment essayer Google Bard en Espagne en utilisant un VPN pour prétendre que nous nous connectons depuis l’un des pays où il est disponible. Si vous le faites, vous pouvez essayer Bard en anglais et voir de quoi PaLM 2 est capable.