Le nouveau système quantifie les personnalités du modèle de langue grâce à l’analyse linguistique
Les modèles de grands langues (LLM) sont à la pointe de l’intelligence artificielle (IA) et ont été largement utilisés pour les interactions conversationnelles. Cependant, l’évaluation de la personnalité d’un LLM donné reste un défi important.
Une équipe de recherche de l’Université polytechnique de Hong Kong (PolyU) a développé un système d’évaluation axé sur l’IA, l’évaluation linguistique de la personnalité linguistique (LMLPA), avec des capacités pour mesurer quantitativement les traits de personnalité des LLM par analyse linguistique.
Cette recherche interdisciplinaire innovante en IA et en linguistique informatique a conduit au développement d’outils robustes et axés sur les données pour évaluer les traits et comportements de personnalité LLM nuancés. Le système LMLPA représente une étape critique dans la compréhension des LLM et les développer pour être plus alignés sur les valeurs et les besoins humains.
Dirigée par le professeur Lik-Hang Lee, professeur adjoint du département de génie industriel et des systèmes de Polyu, la recherche a été publiée dans Linguistique informatique.
LMLPA est conçu pour évaluer et caractériser les personnalités des LLM en examinant les modèles linguistiques, le style et d’autres fonctionnalités liées à la langue dans leurs sorties. Le système comprend deux composants principaux: l’inventaire adapté des Big Five (BFI adapté) et le RATEUR AI. LMLPA administre d’abord le BFI adapté, qui est dérivé des théories précédentes de l’évaluation de la personnalité basée sur le langage, aux LLM.
Le RATEUR AI évalue ensuite les réponses, convertissant les réponses textuelles en valeurs numériques quantifiables représentant des traits de personnalité.
Cette technologie innovante avance non seulement l’IA centrée sur l’homme et la linguistique informatique en fournissant un cadre robuste pour affiner les évaluations de la personnalité de l’IA, mais a également des applications dans divers domaines, notamment l’éducation et la fabrication, ainsi que dans les affaires, par exemple en aidant les entreprises à exiger les exigences de conformité et les rapports environnementaux, sociaux et de gouvernance. Il soutient également les objectifs de développement durable et l’amélioration des services juridiques.
Le professeur Lee a déclaré: « En abordant la limitation des LLM dans la capture des dimensions cognitives et affectives de la personnalité humaine, notre équipe a développé avec succès de nouveaux outils d’évaluation pour évaluer les personnalités de la LLM en termes linguistiques, s’alignant avec leurs capacités fonctionnelles et leurs paradigmes opérationnels. »
La recherche ouvre de nouvelles possibilités pour comprendre et interagir avec l’IA. En quantifiant les personnalités de LLM, leurs styles de communication pour des applications spécifiques peuvent être adaptés, ouvrant la voie à des interactions plus personnalisées entre les humains et les machines.
Le professeur Lee a traduit les fondements technologiques de ses recherches pour créer une plate-forme de conformité commerciale axée sur l’IA. Tirant parti du traitement du langage naturel, la plate-forme peut analyser et interpréter de grands volumes de données textuelles et de rapports, y compris celles générées par les LLM.
La technologie de l’IA est utilisée pour effectuer la collecte automatisée des données, l’analyse et la génération d’informations, rationalisant considérablement le processus de conformité et de rapport de l’entreprise. L’intégration de la LMLPA met en évidence les capacités nuancées de l’IA dans l’évaluation des traits de personnalité basés sur le langage, suggérant des applications potentielles dans l’analyse des affaires qualitatives et des données humaines.
