Qualcomm, toute l’actualité en IA et connectivité présentée au MWC de Barcelone

ÀCongrès mondial du mobile (MWC) de Barcelone, Qualcomm Technologies, a dévoilé ses dernières innovations et réalisations dans le domaine de l’intelligence artificielle, de l’informatique intelligente et de la connectivité sans fil. Ces innovations sont sur le point de catalyser la transformation numérique, d’alimenter une nouvelle phase de croissance économique et de favoriser l’intégration de l’IA et de la connectivité sur de nouveaux marchés.

Les principales innovations annoncées par Qualcomm dans le secteur de l’IA

L’IA générative devrait avoir un impact significatif dans tous les secteurs, avec une augmentation potentielle des retombées économiques annuelles comprise entre 2 600 et 4 400 milliards de dollars.

• Qualcomm IA Hub introduit une bibliothèque mise à jour avec plus de 75 modèles d’IA pré-optimisés pour un déploiement fluide sur les appareils basés sur les plates-formes Snapdragon et Qualcomm. Les développeurs peuvent facilement intégrer ces modèles dans leurs applications, réduisant ainsi les délais de commercialisation et profitant des avantages de l’IA mise en œuvre sur les appareils, tels que la réactivité immédiate, la fiabilité, la confidentialité, la personnalisation et les économies de coûts. Ces modèles sont disponibles sur Qualcomm AI Hub, Hugging Face et GitHub. Les développeurs peuvent exécuter des modèles avec seulement quelques lignes de code sur des appareils hébergés dans le cloud et alimentés par les plateformes Qualcomm.

• Le système modem-antenne Système Modem-RF Snapdragon X80 5G représente la plateforme 5G la plus avancée au monde. L’architecture Snapdragon X80 intègre des capacités 5G avancées et est le premier modem à prendre en charge les communications par satellite NB-NTN entièrement intégrées pour la connectivité aux réseaux non terrestres. Un accélérateur tenseur dédié permet une optimisation de l’IA qui améliore le débit, la qualité de service (QoS), la couverture, la latence, l’efficacité spectrale, l’efficacité énergétique et la gestion des faisceaux mmWave.

• Le système de connectivité mobile Qualcomm FastConnect 7900 C’est le premier à offrir des performances optimisées par l’IA et à intégrer les technologies Wi-Fi 7, Bluetooth et Ultra Wideband dans une seule puce. Alimenté par l’IA, FastConnect 7900 s’adapte à des cas d’utilisation et à des environnements spécifiques, offrant des améliorations significatives en termes de consommation d’énergie, de latence du réseau et de débit. FastConnect 7900 intègre la technologie Ultra Wideband, la télémétrie Wi-Fi et le sondage des canaux Bluetooth pour créer une suite puissante de technologies de proximité qui vous aident à localiser, accéder et contrôler les appareils en toute sécurité.

Recherche avancée sur l’IA de Qualcomm

« L’avenir de l’IA générative est hybride, avec une intelligence intégrée aux appareils travaillant en synergie avec le cloud pour offrir davantage de personnalisation, de confidentialité, de fiabilité et d’efficacité. La connectivité est essentielle pour aider l’IA générative à évoluer et à s’étendre à travers le cloud, la périphérie et les appareils », a-t-il déclaré. Christian Amon, président-directeur général de Qualcomm Incorporated. « En tant que leader de l’informatique intelligente, nous permettons à l’écosystème de développer et de commercialiser des cas d’utilisation, des expériences et des produits d’IA générative de premier plan dans toutes les catégories d’appareils, notamment les smartphones, les PC de nouvelle génération, les appareils XR, les véhicules, la robotique et bien plus encore. »

Ces produits étaient exposés aux côtés d’autres sur le stand Qualcomm Technologies au MWC de Barcelone :

Démonstrations de recherche avancée sur l’IA :

• le premier grand modèle multimodal (LMM) au monde sur un téléphone Android – un LMM de plus de 7 milliards de paramètres qui peut accepter plusieurs types de données d’entrée, y compris du texte et des images, et générer des conversations multi-voix avec un assistant IA sur une image – fonctionnant pour le première fois sur un smartphone Android ;
• Diffusion stable avec adaptation à faible portée (LoRA) – une technique qui permet une IA générative évolutive et personnalisée sur l’appareil pour tous les cas d’utilisation – fonctionnant sur un smartphone Android ;

• Première démonstration au monde d’un LMM avec plus de 7 milliards de paramètres exécutés sur un PC Windowscapable d’accepter des entrées textuelles et audio (par exemple, musique, bruit de la circulation) et de générer des conversations à plusieurs tours via l’audio.
• Fonctionnalités d’IA générative dans les smartphones, PC Windows, voitures et appareils portables nouveaux et à venir
• Plateforme d’accès sans fil fixe Qualcomm 5G Ultra Gen 3
• Processeurs d’infrastructure Qualcomm
• Jalons de la recherche sans fil de classe mondiale
• Plateforme de connectivité Snapdragon Auto avec Wi-Fi 7.

Le spectre Snapdragon, l’efficacité énergétique et la gestion multi-antennes.

Muflier X80

« Muflier« , a-t-il déclaré Durga Malladi, vice-président senior et directeur général, planification technologique et solutions de pointe, Qualcomm Technologies, Inc. « Tirer parti de l’IA est essentiel pour l’avenir de la connectivité, et cette dernière étape met en évidence le leadership de Qualcomm Technologies à l’intersection de l’IA de pointe et de la technologie avancée de modem-RF. Le Muflierou ».

Les appareils commerciaux basés sur Snapdragon X80 devraient être lancés au second semestre 2024. Pour plus de détails techniques, veuillez visiter la page Web Snapdragon X80.

Qualcomm AI Hub : le portail des développeurs pour des performances supérieures d’IA sur appareil

Le nouveau Qualcomm AI Hub contient une bibliothèque de modèles d’IA pré-optimisés pour un déploiement transparent sur des appareils basés sur les plates-formes Snapdragon et Qualcomm. Cette bibliothèque fournit aux développeurs plus de 75 modèles d’IA et d’IA génératifs populaires, tels que Whisper, ControlNet, Stable Diffusion et Baichuan 7B, optimisés pour des performances d’IA supérieures sur l’appareil, une utilisation moindre de la mémoire et une meilleure efficacité énergétique, sur plusieurs facteurs de forme. et conditionné dans différents environnements d’exécution. Chaque modèle est optimisé pour tirer parti de l’accélération matérielle sur tous les cœurs du Qualcomm AI Engine (NPU, CPU et GPU), avec des temps d’inférence 4 fois plus rapides.

La bibliothèque de modèles AI gère automatiquement la traduction des modèles du framework source vers les environnements d’exécution populaires et fonctionne directement avec le SDK direct Qualcomm AI Engine, puis en appliquant des optimisations matérielles. Les développeurs peuvent intégrer de manière transparente ces modèles dans leurs applications, réduisant ainsi les délais de commercialisation et bénéficiant des avantages des implémentations d’IA sur appareil, tels que l’immédiateté, la fiabilité, la confidentialité, la personnalisation et la réduction des coûts.

Des modèles optimisés sont disponibles sur Qualcomm AI Hub, GitHub et Hugging Face. De nouveaux modèles et la prise en charge de plates-formes et de systèmes d’exploitation supplémentaires seront continuellement ajoutés au Qualcomm AI Hub. Les développeurs peuvent s’inscrire dès aujourd’hui pour exécuter des modèles sur des appareils hébergés dans le cloud alimentés par les plates-formes Qualcomm Technologies et obtenir un accès anticipé aux nouvelles fonctionnalités et modèles d’IA disponibles via Qualcomm AI Hub.

Les progrès de la recherche sur l’intelligence artificielle

Pour la première fois exécuté sur un smartphone Android, Qualcomm AI Research présente le Large Language and Vision Assistant (LLaVA), un grand modèle multimodal (LMM) de plus de 7 milliards de paramètres qui peut accepter plusieurs types de données d’entrée, y compris du texte et des images. , et pour générer des conversations à plusieurs tours avec un assistant IA sur une image. Ce LMM fonctionne à un taux de jetons réactif sur l’appareil, ce qui améliore la confidentialité, la fiabilité, la personnalisation et le coût. Les LMM dotés d’une compréhension du langage et d’une compréhension visuelle permettent de nombreux cas d’utilisation, tels que l’identification et la discussion de modèles visuels, d’objets et de scènes complexes.

Qualcomm AI Research présente également la première démonstration de Adaptation de bas rang (LoRA) sur un smartphone Android.

En cours d’exécution Diffusion stable avec LoRA, les utilisateurs peuvent créer des images personnalisées de haute qualité basées sur leurs préférences personnelles ou artistiques. LoRA réduit le nombre de paramètres pouvant être entraînés des modèles d’IA, permettant ainsi une plus grande efficacité, évolutivité et personnalisation des cas d’utilisation de l’IA générative sur l’appareil. En plus de permettre un réglage fin des modèles de vision du langage (LVM) pour différents styles artistiques, LoRA est largement applicable aux modèles d’IA personnalisés, tels que les grands modèles de langage, pour créer des assistants personnels sur mesure, améliorer la traduction linguistique et bien plus encore.

Sur un PC Windows, Qualcomm AI Research présente la première démonstration au monde d’un LMM avec plus de 7 milliards de paramètres, capable d’accepter du texte et des entrées audio (par exemple, de la musique, le bruit de la circulation, etc.) et de générer des conversations multitours sur l’audio.

Qualcomm au Mobile World Congress de Barcelone : permettre l’IA générative sur toutes les catégories d’appareils

Téléphones intelligents: Qualcomm a dévoilé une série de smartphones commerciaux phares à IA alimentés par la plate-forme mobile Snapdragon 8 Gen 3, notamment HONOR Magic6 Pro, OPPO X7 Ultra et Xiaomi 14 Pro. Chacun de ces appareils comprend de nouvelles fonctionnalités d’IA générative intéressantes, telles que la génération d’IA. extension d’image (Xiaomi), création de vidéos et de calendriers basée sur l’IA (HONOR) et suppression d’objets image (OPPO) ;

PC: Le nouveau Snapdragon X Elite et ses 45 TOPS NPU sont conçus pour l’IA sur appareil qui transformera la façon dont nous interagissons avec nos PC. En utilisant l’éditeur d’images populaire et gratuit GIMP avec le plugin Stable Diffusion, Qualcomm Technologies démontrera que vous pouvez saisir l’image souhaitée et l’IA générative créera une image en 7 secondes, trois fois plus rapide que les concurrents x86 ;

Automobile: Tirant parti de ses solutions matérielles et logicielles d’IA de pointe, la société démontre également des capacités d’IA traditionnelles et génératives avec la plateforme Snapdragon Digital Chassis, visant à offrir des expériences plus puissantes, efficaces, privées, sécurisées et personnalisées aux conducteurs et aux passagers ;

L’IoT pour les consommateursi : Présentation de l’IA Pin de Humane qui fonctionne sur une plate-forme Snapdragon et donne aux utilisateurs la possibilité d’emporter l’IA partout avec eux dans un tout nouveau facteur de forme conversationnel et sans écran ;

Connectivité: le nouveau système Snapdragon X80 Modem-RF et le système de connectivité mobile Qualcomm FastConnect 7900 ;

Infrastructures 5G: Qualcomm Technologies a dévoilé trois améliorations innovantes basées sur l’IA pour la gestion du réseau, notamment un assistant d’IA génératif destiné aux ingénieurs des réseaux d’accès radio (RAN) pour simplifier les tâches de gestion du réseau et des tranches, une application RAN ouverte (rApp) pilotée par l’IA qui réduit la consommation d’énergie du réseau. et une suite de gestion du cycle de vie des tranches de réseau 5G basée sur l’IA.