STMicroelectronics dévoile un module de vision tout-en-un pour robots humanoïdes avec NVIDIA
STMicroelectronics et Leopard Imaging ont présenté un module de vision multimodal tout-en-un destiné aux systèmes robotiques humanoïdes et autres systèmes robotiques avancés. Ce module intègre les capteurs d'images de ST et s'intègre nativement avec les plateformes de développement robotique NVIDIA Jetson et NVIDIA Isaac.
Un module de vision multimodal pour la robotique humanoïde
STMicroelectronics et Leopard Imaging ont présenté un module de vision multimodal tout-en-un combinant les capteurs d'images de ST, la cartographie 3D des scènes et la détection de mouvement avec la technologie NVIDIA Holoscan Sensor Bridge. Le module s'intègre nativement avec les plateformes de développement robotique ouvertes NVIDIA Jetson et NVIDIA Isaac, simplifiant et accélérant la conception des systèmes de vision tout en respectant les contraintes de taille, de poids et de consommation énergétique des robots humanoïdes. Cette annonce intervient le 16 mars 2026.
Caractéristiques techniques et composants intégrés
Le module de vision intègre plusieurs composants de ST. Pour la détection basée sur la vision, le capteur d'image couleur RGB-infrarouge (RGB-IR) de 5,1 mégapixels de qualité automobile ST VB1940 avec des modes global shutter et rolling shutter. ST propose également une version grand public et industrielle, le V943, disponible en monochrome ou RGB-IR. Pour la détection de mouvement, l'unité de mesure inertielle 6 axes LSM6DSV16X intègre le cœur d'apprentissage automatique de ST pour l'IA embarquée. Pour la détection de profondeur 3D, le module LiDAR tout-en-un dToF VL53L9CX offre une détection de profondeur 3D jusqu'à 9 mètres avec une résolution de 54 x 42 zones (près de 2 300 zones) et un large champ de vision de 55°x42°, réalisant des mesures jusqu'à 100 images par seconde.
Intégration avec l'écosystème NVIDIA et capacités de développement
Le module s'intègre avec NVIDIA Jetson via Ethernet pour l'ingestion en temps réel des données des capteurs et avec la plateforme de développement robotique ouverte NVIDIA Isaac, qui offre des modèles d'IA ouverts, des cadres de simulation et des bibliothèques pour les développeurs. Le nouveau module comprend un système de construction et des interfaces de programmation d'applications (API), des algorithmes d'intelligence artificielle spécialement conçus pour les robots mobiles, des applications d'exemple, une randomisation de domaine, ainsi qu'un environnement de simulation contenant des modèles de capteurs. ST continue d'intégrer ses capteurs, pilotes, actionneurs, contrôleurs et outils de développement dans l'écosystème robotique NVIDIA en tant que partenaire clé en robotique et IA embarquée.
