Le hub AI de Qualcomm permet aux développeurs d’ajouter gratuitement l’IA à leurs applications

L’intégration de l’intelligence artificielle dans les smartphones et les ordinateurs que nous utilisons tous les jours se poursuit en 2024. Qualcomm, créateur des puces qui pourraient bien alimenter le téléphone que vous tenez en ce moment, annonce un nouveau service et deux nouveaux produits au Mobile World Congress 2024, conçus pour mieux prendre en charge les fonctions d’IA qui fonctionnent déjà sur des appareils tels que la gamme Galaxy S24 de Samsung, et, espérons-le, pour inciter d’autres fabricants de téléphones et d’ordinateurs à faire de même.

Les deux grandes plates-formes annoncées par Qualcomm l’année dernière ont été conçues en tenant compte de l’IA. Le Snapdragon 8 Gen 3, en plus d’être plus performant et économe en énergie, est doté d’une unité de traitement neuronal Hexagon améliorée conçue pour prendre en charge l’exécution de modèles d’IA génératifs sur l’appareil. Le Snapdragon X Elite, la nouvelle plateforme PC de Qualcomm qui équipera probablement les appareils Surface de nouvelle génération de Microsoft en 2024, était également axé sur le traitement des requêtes d’IA plus rapidement que la concurrence.

Qualcomm s’appuie sur ces avancées avec son AI Hub, une bibliothèque de modèles d’IA optimisés pour fonctionner sur les puces Snapdragon, les nouveaux modems 5G et les systèmes Wi-Fi qui ont été rendus plus efficaces grâce à l’IA…

Au MWC, Qualcomm s’appuie sur ces avancées avec son AI Hub, une bibliothèque de modèles d’IA optimisés pour fonctionner sur les puces Snapdragon, de nouveaux modems 5G et des systèmes Wi-Fi plus efficaces grâce à l’IA, ainsi que de nombreux exemples de recherche sur l’IA pour étayer ses affirmations selon lesquelles il est possible d’exécuter une IA générative complexe sur les téléphones Android dès aujourd’hui. Pour en savoir plus sur tous ces points et bien plus encore, lisez la suite ci-dessous.

Qualcomm Snapdragon 8 Gen 3 : détails de la plate-forme mobile phare de 2024

Voici tout ce qu’il faut savoir sur la plateforme mobile Qualcomm Snapdragon 8 Gen 3 et ce qu’elle signifie pour les smartphones phares de 2024.

Qualcomm lance un hub AI pour les développeurs

L’AI Hub est une « bibliothèque complète de modèles d’IA » comprenant plus de 75 modèles d’IA et d’IA générative différents, conçue pour aider les développeurs à « intégrer rapidement et facilement des modèles d’IA pré-optimisés dans leurs applications », selon Qualcomm. Dans certains cas, l’ajout des modèles devrait être aussi simple que l’ajout de quelques lignes de code, affirme Qualcomm, et ils sont tous explicitement optimisés pour fonctionner efficacement sur les plates-formes Snapdragon de Qualcomm.

Qualcomm espère que cette initiative encouragera les développeurs à intégrer des fonctions d’IA dans des applications qui sont par nature plus privées, car elles peuvent être exécutées entièrement sur l’appareil et n’ont pas besoin de faire l’aller-retour vers un serveur dans le nuage. Cela signifie également que vous pourriez profiter de fonctions d’IA de pointe telles que la traduction ou la transcription en direct sans avoir besoin d’une connexion internet.

Le nouveau Snapdragon X80 5G Modem-RF

Même si, sur le papier, un nouveau modem 5G n’est pas aussi excitant que les processeurs et les GPU qui assurent la rapidité et la puissance de votre smartphone, le nouveau Snapdragon X80 5G Modem-RF de Qualcomm présente des caractéristiques qui pourraient s’avérer utiles pour les téléphones Android de cette année.

Plus précisément, dans ce cas, en raison de la prise en charge intégrée des « communications par satellite NB-NTN », permettant théoriquement le même type de messagerie, d’appels et de partage de localisation dans des environnements éloignés que les iPhones sont capables de faire grâce à la fonction SOS d’urgence d’Apple, sans avoir à dépendre d’une autre puce.

L’IA prend le volant de la 5G

Bien entendu, l’IA est également présente. Le nouveau Snapdragon X80 5G Modem-RF de Qualcomm utilise une structure à 6 antennes prête pour la 5G-Advanced.

Essentiellement, en permettant à l’IA de l’appareil de gérer le moment où votre téléphone change de tour cellulaire, par exemple, ou la façon dont il envoie et appelle les données du réseau de son opérateur, l’IA est en mesure d’améliorer la cohérence et la qualité de la connexion Internet sur votre téléphone.

Qualcomm met l’IA au service du Wi-Fi avec le FastConnect 7900

le nouveau système FastConnect 7900 devrait solliciter encore moins la batterie déjà limitée de votre smartphone, tout en permettant de nouveaux types de fonctions intégrées telles que les clés numériques, la recherche d’objets (comme sur un Apple AirTag ou un Samsung Galaxy SmartTag 2) et la navigation intérieure.

Un nouveau type de Wi-Fi ?

Si cela n’est pas excitant, peut-être que Wi-Fi 7 le sera. La nouvelle puce de Qualcomm prend en charge le Wi-Fi 7, la norme sans fil de nouvelle génération qui améliore les débits de données, l’efficacité et la capacité. En fait, le Wi-Fi 7 prend en charge trois bandes : 2,4 GHz, 5 GHz et 6 GHz, ce qui signifie moins d’encombrements et des temps de chargement plus rapides lorsque vous êtes connecté à un routeur Wi-Fi 7.

Laisser couler le LLaVa

Pour prouver que les nouvelles plates-formes que Qualcomm a déjà lancées et les optimisations qu’elle annonce au MWC font réellement la différence, l’entreprise fait également la démonstration d’un assistant LMM (Large Language and Vision Assistant), le premier grand modèle multimodal de ce type à fonctionner sur un téléphone Android. Le prototype d’assistant peut utiliser plusieurs types d’entrées de données et est capable d’engager des conversations à plusieurs voix sur tout ce que vous lui envoyez.

L’interface et les interactions présentées par Qualcomm dans sa vidéo de démonstration ressemblent beaucoup à ce qui est actuellement possible avec l’application ChatGPT. La principale différence réside dans le fait que LLaVa fonctionne entièrement sur votre smartphone, au lieu d’interroger les serveurs d’OpenAI pour obtenir des analyses et des réponses.

Explication de Qualcomm sur la manière dont les LMM pourraient fonctionner sur les PC

Qualcomm a pu réaliser une démonstration similaire sur un PC à l’aide de sa plateforme Snapdragon X Elite. L’équipe de recherche de l’entreprise a conçu un « LMM à plus de 7 milliards de paramètres » qui accepte des entrées textuelles et audio et qui est capable de générer de longues conversations à leur sujet, le tout sur un seul appareil. Bien que cela semble moins impressionnant que de réaliser la même chose sur un smartphone, il s’agit d’une démonstration clé pour les fabricants de PC, d’autant plus que Microsoft continue de faire pression pour que 2024 soit l’année du « PC IA » avec Microsoft Copilot et, on le suppose, son propre matériel plus tard dans l’année. Un certain niveau d’assistant IA sur l’appareil est tout à fait possible aujourd’hui.