NVIDIA déclare que "l'ère de la robotique généraliste est arrivée" et annonce Isaac GR00T N1, "le premier modèle de fondation ouvert au monde"

Pour accélérer le développement des robots humanoïdes

NVIDIA annonce Isaac GR00T N1, son premier modèle de fondation ouvert entièrement personnalisable, pour apporter des compétences et un raisonnement généralisés aux robots humanoïdes. NVIDIA annonce également des cadres de simulation pour accélérer le développement des robots. NVIDIA, Google DeepMind et Disney Research collaborent pour développer le moteur physique open source Newton de nouvelle génération. En outre, NVIDIA annonce le nouveau Blueprint Omniverse pour la génération de données synthétiques et le jeu de données open source pour donner un coup d'accélérateur aux données physiques de l'IA

En mars 2024, Brett Adcock, fondateur et PDG de Figure AI, a déclaré que les robots humanoïdes deviendront des "biens essentiels dans un avenir proche." L'entrepreneur américain affirmait que cette évolution permettrait à chacun de posséder son propre robot. Selon lui, ce sera un peu comme posséder une voiture ou un téléphone aujourd'hui. En effet, les robots humanoïdes ont émergé comme une nouvelle frontière critique pour l'industrie de l'IA, lui permettant d'appliquer des technologies de pointe à des tâches du monde réel.

Quelques jours avant ces déclarations, NVIDIA avait dévoilé une plateforme d'IA appelée GR00T (Generalist Robot 00 Technology) qui vise à créer des robots humanoïdes dotés d'une compréhension et de mouvements semblables à ceux des humains. NVIDIA avait qualifié sa nouvelle plateforme de "modèle de base à usage général pour les robots humanoïdes". GR00T est conçu pour servir de plateforme de base aux fabricants de robots humanoïdes comme Boston Dynamics et Agility Robotics.

Un an plus tard, lors de la keynote de la GTC 2025, Jensen Huang, fondateur et PDG de NVIDIA, a annoncé Isaac GR00T N1, le premier modèle de fondation open-source, pré-entraîné mais personnalisable, conçu pour accélérer le développement et les capacités des robots humanoïdes. "L'ère de la robotique généraliste est arrivée", a déclaré Huang. "Avec le NVIDIA Isaac GR00T N1 et les nouveaux cadres de génération de données et d'apprentissage des robots, les développeurs robotiques du monde entier ouvriront la prochaine frontière de l'ère de l'IA."


Huang a présenté le robot humanoïde NEO Gamma de 1X effectuant des tâches de rangement autonomes à l'aide d'une politique post-entraînée construite sur le modèle GR00T N1. D'autres entreprises développant des robots humanoïdes ont eu un accès anticipé au modèle GR00T N1, notamment Boston Dynamics, les créateurs d'Atlas, Agility Robotics, Mentee Robotics et Neura Robotics. Le modèle de fondation GR00T N1 utilise une architecture à deux systèmes inspirée de la cognition humaine.

Le système 1, comme l'appelle NVIDIA, est décrit comme un "modèle d'action à réflexion rapide" qui se comporte de manière similaire aux réflexes et à l'intuition de l'homme. Il a été entraîné à partir de données collectées lors de démonstrations humaines et de données synthétiques générées par la plateforme Omniverse de NVIDIA.

Le système 2, qui est alimenté par un modèle de langage de vision, est un "modèle à réflexion lente" qui "raisonne sur son environnement et les instructions qu'il a reçues pour planifier des actions". Ces plans sont transmis au système 1, qui les traduit en "mouvements robotiques précis et continus", notamment pour saisir et déplacer des objets à l'aide d'un ou de deux bras, ainsi que pour effectuer des tâches plus complexes en plusieurs étapes qui impliquent des combinaisons de compétences de base.

Alors que le modèle de fondation GR00T N1 est pré-entraîné avec un raisonnement et des compétences humanoïdes généralisés, les développeurs peuvent personnaliser son comportement et ses capacités pour des besoins spécifiques en le post-entraînant avec des données recueillies à partir de démonstrations ou de simulations humaines. NVIDIA a mis à disposition les données d'entraînement du GR00T N1 et les scénarios d'évaluation des tâches, qui peuvent être téléchargés via Hugging Face et GitHub.

Il serait maintenant intéressant de voir l'impact de cette technologie de NVIDIA dans le domaine de la robotique. Pour rappel, en mai 2024, un rapport a révélé qu'il existait au moins 37 robots humanoïdes différents en cours de développement. Si de nombreux robots humanoïdes en sont encore au stade du prototype ou à d'autres stades précoces de développement, quelques-uns sont déjà entrés dans le monde réel. Le rapport constatait notamment que grâce aux technologies libres et aux fabricants de composants spécialisés, "il est plus facile que jamais d'en fabriquer".


Voici un extrait de l'annonce de NVIDIA :