Les plus grandes nouvelles de la robotique de Nvidia GTC Jour 2

Le deuxième jour de Nvidia GTC est derrière nous. Le point culminant de la journée a été la séance d’ouverture du PDG de Nvidia, Jensen Huang, à la San Jose Arena. L’arène a été emballée aux chevrons avec environ 16 000 participants. Huang a présenté pendant près de deux heures et, à un moment donné, a amené le robot Disney BDX sur scène avec lui.

Le robot Disney BDX a diverti la foule tandis que le PDG de Nvidia, Jensen Huang, a discuté de nouveaux produits robots. | Crédit: le rapport du robot

Alors que la session a couvert certaines nouvelles de la robotique, l’objectif principal de la présentation de Huang était de convaincre les médias grand public que le lancement en profondeur l’année dernière était en fait une grande chose pour Nvidia entreprise. NVIDIA est entièrement dans ce qu’il définit comme des «usines d’IA», la prochaine itération des centres de données optimisés pour l’exécution de workflows d’IA en fonction de l’architecture NVIDIA.

Cette partie de l’ouverture a mis en évidence la nouvelle puce Blackwell et le nouveau logiciel «Dynamo» conçu pour rendre le raisonnement AI 40X plus rapidement que les générations précédentes.

Robotics Sights From the Keynote

Huang a fait plusieurs annonces de robotique importantes lors de la conférence, en commençant par le partenariat de Nvidia avec GM pour développer des véhicules de nouvelle génération, des usines automobiles et des robots.

De plus, Nvidia a annoncé qu’il était en open source Gr00t N1. Plus tard dans la journée, j’ai eu l’occasion de m’asseoir avec Akhil Docca, directeur marketing principal de Nvidia OmIverse, pour discuter de l’importance de cette annonce.

NVIDIA a conçu GR00T N1 pour la polyvalence, permettant à un modèle de fondation unique d’alimenter divers robots humanoïdes. Les développeurs peuvent l’affiner pour des applications spécifiques et utiliser ses capacités de génération de données synthétiques pour améliorer les ensembles de données de formation. En ouverte le modèle sur des plates-formes comme les câlins, l’accessibilité est augmentée, ce qui réduit la barrière pour les chercheurs et les développeurs.

Le modèle fait progresser la robotique de l’IA en se déplaçant vers une technologie généraliste capable de perception, de raisonnement et d’action dans divers scénarios. Cette approche vise à accélérer l’innovation en fournissant un cadre d’IA unique et adaptable qui peut effectuer plusieurs tâches, favorisant le développement de robots plus polyvalents et intelligents.

Les développeurs peuvent désormais affiner le modèle pour des cas d’utilisation spécifiques, le rendant plus adaptable à différentes applications robotiques. Le modèle est livré avec un plan pour générer des données synthétiques, ce qui aide à étendre la diversité des ensembles de données de formation et à améliorer les performances des robots dans divers environnements.

Nvidia a annoncé Cosmos Au CES plus tôt cette année, mais à la GTC, Huang a réitéré l’importance de Cosmos pour le développement des robots. Nvidia Cosmos est une plate-forme de modèles de fondation mondiale générative (WFMS) de pointe, de jetons avancés, de garde-corps et d’un pipeline de traitement et de conservation des données accélérées. Il est construit pour l’entraînement du monde de pouvoir et accélère le développement de l’IA physique pour les véhicules autonomes (AVS) et les robots.

Huang a également annoncé Newtonun moteur de physique extensible open source en cours de développement par Nvidia, Google Deepmind et RECHERCHE DISNEY pour faire progresser l’apprentissage et le développement du robot. C’est pourquoi Huang a invité le robot Disney BDX sur scène avec lui.

Nvidia Newton Diagramme. | Crédit: Nvidia

Newton est compatible avec MuJuco, un moteur de physique open source largement utilisé pour la recherche et le développement en robotique, impliquant spécifiquement une dynamique complexe et des environnements riches en contact.

Sur les annonces Cosmos et Newton, Docca a déclaré: «La genèse était vraiment de construire ce moteur de physique open source de prochaine génération pour les robots humanoïdes. L’idée était de pouvoir apporter de la physique applicable aux robots humanoïdes comme un mouvement inertielle et un frottement, pour mieux prédire comment le robot traverse. Comment traite-t-il une manipulation digne.»

Agility Robotics et Boston Dynamics annoncent de nouvelles améliorations Nvidia

https://www.youtube.com/watch?v=i44_zbewz_w

Hier, Robotique d’agilité Les sociétés annoncées collaborent également pour rendre les modèles de chiffres à la disposition des partenaires via «Mega», un Blueprint Nvidia OmIverse.

L’utilisation de modèles fondamentaux change la donne en termes de rapidité et de généralité de l’apport des plates-formes polyvalentes comme Digit au monde. Certains faits saillants des nouvelles d’aujourd’hui comprennent:

• Agility a un accélérateur NVIDIA (GPU) en chiffre qui fonctionne à bord des modèles d’IA pour la perception et les commandes
• Agility utilise Isaacsim et Isaaclab pour former ses modèles AI hors ligne dans le cloud
• Agility travaille sur la prise en charge de la plate-forme NVIDIA MEGA récemment annoncée (un simulateur à grande échelle construit au-dessus d’Isaacsim) afin que des clients comme Schaeffler puissent mettre un chiffre dans leurs jumeaux numériques à l’échelle des installations

Dans une annonce distincte, Dynamique de Boston a révélé avoir élargi sa collaboration avec Nvidia pour construire la prochaine génération de capacités d’IA pour les robots humanoïdes. En tant qu’adopteur précoce de la plate-forme NVIDIA ISAAC GR00T, le robot Atlas de Boston Dynamics est l’un des nombreux humanoïdes utilisant la plate-forme informatique Nvidia Jetson Thor.

La taille compacte, les performances élevées et l’efficacité de Jetson Thor permettent à Atlas de gérer des modèles d’IA multimodaux complexes qui fonctionnent de manière transparente avec les contrôleurs et les contrôleurs de manipulation de Boston Dynamics.

Les développeurs de Boston Dynamics et de ses partenaires de recherche font également des percées rapides dans les politiques de dextérité et de locomotion de locomotion apprises à l’aide du laboratoire ISAAC, un cadre modulaire open-source pour l’apprentissage des robots dans des environnements virtuels physiquement précis, qui est construit sur les technologies Nvidia Isaac SIM et NVIDIA OMNIVERSE. Les deux sociétés collaborent pour définir des paramètres de plate-forme clés, notamment des architectures de sécurité et de sécurité fonctionnelles, ainsi que des pipelines clés d’apprentissage et de vision par ordinateur à l’aide des plateformes de formation et de simulation de NVIDIA.

Le Dr Ken Goldberg divertit avec sa session

Le Dr Ken Goldberg était entouré de fans de questions après sa session GTC 2025. | Crédit: le rapport du robot

L’une des séances auxquelles j’ai assisté dans l’après-midi a été «Leguling the Real Robot Revolution du Dr Ken Goldberg nécessite de combler l’écart de données». La session était pure Goldberg, et elle ne se tenait debout que dans la pièce, car Goldberg nous a fait traverser une leçon d’histoire sur le développement de Dexnet, la genèse de Ambi Roboticset le rythme de l’innovation pour l’IA au cours des cinq dernières années. Il s’agit d’une session qui vaut la peine d’être rejouée, une fois la vidéo publique. Goldberg était également un invité sur notre webinaire de prédictions 2025 en janvier 2025, regardez la rediffusion ici.

Nvidia prend le contrôle de la ville

Le PDG de Nvidia, Jensen Huang, est sur scène avec le PDG de Hewlett Packard Enterprise Antonio Neri au GTC After-Party sur South Market Street à San Jose. | Crédit: le rapport du robot

L’année dernière a marqué le retour d’un événement physique pour GTC, après la pandémie. Cette année, l’événement s’est développé, sortira du San Jose Convention Center (SJCC) et remplissant les rues pour les blocs autour de SJCC. L’événement bloque entièrement la zone sur le marché sud entre First Street et Almaden Blvd. Au déjeuner, la région est remplie de food trucks pour nourrir les 20 000 participants, et la nuit, il y a un marché nocturne avec des vendeurs de nourriture et d’artisanat et une scène avec de la musique live pour divertir la foule.