NVIDIA américaine enrichit sa plateforme de développement robotique avec plus de 2 000 nouveaux actifs de simulation

fr.wedoany.com Rapport : Le 21 octobre, lors de la conférence GTC organisée à Berlin en Allemagne, NVIDIA a annoncé l'extension de la plateforme ouverte de développement robotique Isaac, le lancement du framework d'exécution robotique Isaac OS, la publication officielle d'Isaac Lab 3.0, ainsi que l'ajout de plus de 2 000 actifs de robots et d'usines directement utilisables pour la simulation. Cette mise à jour comprend également la plateforme de référence pour robots humanoïdes Agile ONE SN et trois flux de travail d'entraînement open source, couvrant les étapes de R&D telles que la génération de données robotiques, la simulation physique, l'entraînement de modèles et le déploiement réel.

Isaac Lab 3.0, dévoilé à cette occasion, est désormais officiellement disponible ; il permet aux développeurs d'entraîner et d'optimiser les stratégies de contrôle des robots via des ressources de calcul multi-GPU, et est compatible avec les moteurs physiques Newton et PhysX. Le nouveau Isaac OS, construit sur Holoscan, assure la connexion entre les modèles d'intelligence artificielle, les capteurs, les systèmes de contrôle et le matériel robotique, et prend en charge le déploiement de programmes de contrôle en temps réel, de l'environnement de simulation au robot physique. NVIDIA propose également trois flux de travail de référence open source pour la DGX Station, destinés respectivement à l'apprentissage par renforcement du modèle GR00T 1.7, à l'entraînement aux compétences de manipulation dextre, et à la génération de données d'entraînement synthétiques via le modèle du monde Cosmos.

Les ressources de données d'entraînement sont également enrichies. La SimReady Central Library regroupe plus de 2 000 actifs de simulation de robots, d'équipements industriels et d'environnements d'usine, couvrant les bras robotisés industriels, les dispositifs de manipulation et les installations de fabrication. Le nouveau jeu de données Human 1M contient des vidéos synchronisées à trois points de vue de diverses activités humaines ainsi que des données de suivi tridimensionnel des mains, utilisables pour l'apprentissage des mouvements robotiques et le développement de stratégies de manipulation. Les ressources concernées sont mises à disposition via la plateforme Hugging Face, le jeu de données complet Human 1M étant réservé aux partenaires de la Cosmos Coalition.

Publié en parallèle des mises à jour logicielles, l'Agile ONE SN est développé par Agile Robots ; il repose sur un corps humanoïde mesurant 1,40 mètre pour un poids de 40 kilogrammes, doté de 31 degrés de liberté corporels et d'une charge utile de 3 kilogrammes par bras. Le robot est équipé de deux mains dextres à cinq doigts WUJI Hand 2, chacune disposant de 20 degrés de liberté, ainsi que d'un système d'actionnement prenant en charge le contrôle de force à 1 kHz et la perception tactile. La plateforme de calcul embarquée Jetson Thor offre une puissance de calcul de 2 070 FP4 TFLOPS et 128 Go de mémoire unifiée ; l'ensemble intègre également des caméras au niveau de la tête et des poignets, un lidar et une centrale inertielle. Cette plateforme de référence devrait être commercialisée début 2027, afin de permettre aux instituts de recherche en robotique de mener des entraînements de mouvements, des intégrations système et des validations de performances.

Des fabricants européens de robots ont déjà commencé à adopter certaines des technologies présentées. ABB Robotics intègre la bibliothèque d'outils NVIDIA Omniverse dans RobotStudio HyperReality pour la simulation et la mise en service virtuelle de systèmes robotiques ; KUKA utilise les outils concernés pour l'environnement de simulation d'usine FactoryLens. NEURA Robotics exploite Isaac Sim et Isaac Lab pour générer des données d'entraînement synthétiques et entraîner les compétences des robots ; Humanoid adopte quant à lui Jetson Thor, Isaac OS et la technologie de sécurité Halos pour développer et valider les comportements robotiques avant des pilotes industriels.