NVIDIA apporte des mises à jour d’IA à la plate-forme Jetson

Nvidia a annoncé des extensions majeures de deux frameworks sur sa plateforme NVIDIA Jetson pour l’IA de pointe et la robotique. Ces mises à jour incluent le nouveau Jetson Generative AI Lab de NVIDIA que les développeurs peuvent utiliser avec les derniers modèles d’IA générative open source, et le cadre robotique NVIDIA Isaac ROS 2.0 est entré en disponibilité générale.

Actuellement, plus de 10 000 entreprises construisent des robots sur la plate-forme NVIDIA Jetson, et ces entreprises peuvent désormais utiliser l’IA générative, les API et les microservices pour accélérer la numérisation industrielle. NVIDIA espère que ce nouveau AI Lab accélérera le développement et les déploiements d’applications d’IA à la périphérie.

De plus en plus, l’IA est utilisée pour faire face à des scénarios de plus en plus complexes dans lesquels les robots pourraient se retrouver, et les développeurs sont poussés à créer des applications d’IA pour la périphérie. Reprogrammer des robots et des systèmes d’IA à la volée pour répondre à l’évolution des environnements, des lignes de fabrication et des besoins d’automatisation des clients peut prendre beaucoup de temps et nécessite des compétences expertes.

Grâce à l’IA générative, les modèles robotiques peuvent reconnaître des éléments spécifiquement inédits lors de l’entraînement. Et une interface en langage naturel peut simplifier le développement et la gestion de l’IA en périphérie.

Le Jetson Generative AI Lab permet aux développeurs d’accéder à des outils et des didacticiels optimisés pour déployer des LLM open source, des modèles de diffusion pour générer des images interactives, des modèles de langage de vision (VLM) et des transformateurs de vision (ViT). Ces outils combinent l’IA de vision et le traitement du langage naturel pour donner aux robots une compréhension globale de la scène.

Les développeurs auront également accès au NVIDIA TAO Toolkit, qui peut les aider à créer des modèles d’IA efficaces et précis pour les applications de pointe. TAO dispose d’une interface low-code pour permettre aux utilisateurs d’affiner et d’optimiser les modèles d’IA de vision, y compris les modèles ViT et de vision fondamentaux.

Avec TAO, les développeurs peuvent également personnaliser et affiner des modèles fondamentaux comme NVIDIA NV-DINOv2 ou des modèles publics comme OpenCLIP pour créer des modèles d’IA de vision très précis avec très peu de données. TAO inclut également désormais VisualChangeNet, un nouveau modèle basé sur un transformateur pour l’inspection des défauts.

Mises à jour de NVIDIA Metropolis

NVIDIA Metropolis vise à permettre aux entreprises d’adopter plus facilement et de manière plus rentable des solutions de classe mondiale basées sur l’IA pour améliorer l’efficacité opérationnelle et les problèmes de sécurité critiques. La plateforme rassemble un ensemble d’interfaces de programmation d’applications et de microservices permettant aux développeurs de développer rapidement des applications complexes basées sur la vision.

Metropolis inclura d’ici la fin de l’année un ensemble élargi d’API et de microservices destinés à aider les développeurs à créer et à déployer rapidement des applications d’IA de vision évolutives.

Mises à jour de la plateforme NVIDIA Isaac Robotics

Des centaines de clients utilisent la plateforme NVIDIA Isaac pour développer des systèmes robotiques hautes performances dans divers domaines, notamment l’agriculture, l’automatisation des entrepôts, la livraison du dernier kilomètre et les robots de service, entre autres.

Construit sur le système d’exploitation robot (ROS), Isaac ROS apporte de la perception à l’automatisation, en donnant des yeux et des oreilles aux choses qui bougent. Avec la disponibilité générale de la dernière version d’Isaac ROS 2.0, les développeurs peuvent désormais créer et commercialiser des systèmes robotiques hautes performances avec Jetson.

Les améliorations apportées à la dernière version incluent la prise en charge native de ROS 2 Humble, le pont NITROS ROS, CUDA NITROS, l’intégration de la caméra Stereolabs ZED, la prise en charge de Nova Carter et les performances ESS 3.0.

« ROS continue de croître et d’évoluer pour fournir des logiciels open source à l’ensemble de la communauté robotique », a déclaré Geoff Biggs, CTO de l’Open Source Robotics Foundation. « Les nouveaux packages ROS 2 prédéfinis de NVIDIA, lancés avec cette version, accéléreront cette croissance en rendant ROS 2 facilement accessible à la vaste communauté de développeurs NVIDIA Jetson.