PrismML adapte ses petits LLM aux lunettes connectées Qualcomm

👁 125 lectures

PrismML, un laboratoire d’intelligence artificielle fondé par des chercheurs de Caltech et conseillé par Ion Stoica de l’UC Berkeley, a présenté le 24 septembre 2026 au Snapdragon Summit de Qualcomm son modèle Bonsai LLM 1-bit adapté aux lunettes intelligentes fonctionnant sur la plateforme Snapdragon AR1 Gen 1. Cette annonce marque une avancée importante dans le domaine de l’intelligence artificielle embarquée, où les modèles de langage de grande taille sont adaptés pour fonctionner directement sur des appareils portables aux ressources limitées.

Un modèle compact pour la réalité augmentée

Le modèle présenté par PrismML compte 2 milliards de paramètres et est calibré pour la vision et le langage. Concrètement, cela signifie que les lunettes connectées équipées de ce modèle peuvent analyser ce que voit le porteur et fournir des informations contextuelles en temps réel. Par exemple, un utilisateur pourrait regarder un objet, un monument ou un texte, et recevoir instantanément des explications ou des traductions sans avoir besoin de sortir son téléphone. Cette capacité multimodale combine la reconnaissance visuelle et la compréhension du langage naturel dans un seul système compact.

La prouesse technique réside dans la compression : PrismML compresse les modèles d’origine par un facteur 4 tout en conservant, selon la startup, la quasi-totalité des performances sur les benchmarks standards. Cette compression est essentielle car les lunettes connectées disposent de batteries limitées et de puissance de calcul réduite comparée aux ordinateurs ou smartphones. Le terme « 1-bit » dans le nom du modèle fait référence à une technique de quantification extrême qui réduit la précision numérique des paramètres du modèle pour diminuer sa taille et sa consommation énergétique.

Une approche centrée sur la confidentialité et l’autonomie

L’ambition déclarée de PrismML est de proposer une IA open-weight qui s’exécute directement sur l’appareil, sans dépendre des promesses de confidentialité des laboratoires propriétaires ni de leur besoin croissant en infrastructure cloud. Le terme « open-weight » signifie que les poids du modèle, c’est-à-dire les paramètres qui déterminent son comportement, sont accessibles publiquement. Cela contraste avec les modèles propriétaires où seule l’entreprise créatrice contrôle le fonctionnement interne du système.

Pour les utilisateurs, cette approche présente plusieurs avantages pratiques. D’abord, le traitement local signifie que les images capturées par les lunettes ne sont pas envoyées vers des serveurs distants, préservant ainsi la vie privée. Ensuite, l’appareil peut fonctionner sans connexion internet constante, ce qui est particulièrement utile en voyage ou dans des zones mal couvertes. Enfin, l’absence de dépendance au cloud élimine les coûts d’abonnement potentiels et les risques liés à l’arrêt d’un service en ligne.

Disponibilité et perspectives commerciales

Ce portage sur puce Qualcomm constitue une étape vers l’objectif de PrismML de démocratiser l’IA embarquée, mais aucune lunette commerciale intégrant ce modèle n’a été annoncée à ce stade. La plateforme Snapdragon AR1 Gen 1 de Qualcomm représente la base matérielle sur laquelle le modèle Bonsai LLM a été optimisé. Il s’agit d’une puce spécialement conçue pour les applications de réalité augmentée, offrant un équilibre entre performance de calcul et efficacité énergétique.

La présentation au Snapdragon Summit, un événement majeur de l’industrie technologique organisé par Qualcomm, suggère que des partenariats avec des fabricants de lunettes connectées pourraient être en cours de négociation. Cependant, le passage d’une démonstration technique à un produit commercial nécessite généralement plusieurs mois de développement supplémentaire pour assurer la fiabilité, l’ergonomie et la conformité réglementaire.

Questions fréquentes

Qu’est-ce que le modèle Bonsai LLM 1-bit de PrismML ?

Il s’agit d’un modèle d’intelligence artificielle de 2 milliards de paramètres, calibré pour la vision et le langage, qui permet aux lunettes connectées d’identifier en temps réel ce que regarde le porteur. Le modèle est compressé par un facteur 4 par rapport aux modèles d’origine tout en conservant la quasi-totalité des performances sur les benchmarks standards.

Quand ce modèle sera-t-il disponible dans des lunettes commerciales ?

Aucune lunette commerciale intégrant ce modèle n’a été annoncée à ce stade. La présentation a eu lieu le 24 septembre 2026 au Snapdragon Summit de Qualcomm, mais le passage à un produit disponible pour le grand public nécessite encore du développement.

Pourquoi PrismML privilégie-t-il une IA qui fonctionne directement sur l’appareil ?

PrismML souhaite proposer une IA open-weight qui s’exécute directement sur l’appareil pour ne pas dépendre des promesses de confidentialité des laboratoires propriétaires ni de leur besoin croissant en infrastructure cloud, offrant ainsi plus de contrôle et de confidentialité aux utilisateurs.

// lire la suiteIA et élèves à besoins particuliers : adapter les supportsGuidesConnexion à Gemini : se connecter sur le web et mobileGuidesLunettes IA et écoute des conversations : quels risques juridiques ?Magazine

Kinetyra