Nvidia lance un modèle de fondation pré-entraîné pour robots humanoïdes

Nvidia a multiplié les annonces dans le cadre de sa conférence annuelle pour développeurs (GTC). Parmi les principales nouveautés, le fabricant a dévoilé NVIDIA Isaac GR00T N1, un modèle de fondation personnalisable destiné à doter les robots humanoïdes de compétences variées. Ce modèle représente une évolution significative d’une technologie encore à l’état de projet il y a un an, lorsqu’elle avait été présentée lors de la précédente édition de la GTC.

Une architecture inspirée du cerveau humain

«L’ère de la robotique généraliste est arrivée», a déclaré Jensen Huang, fondateur et CEO de Nvidia, lors de sa keynote. GR00T N1 est le premier d’une série de modèles pré-entraînés que Nvidia prévoit de mettre à disposition des développeurs de robots. Sa particularité réside dans son architecture à double système, inspirée des principes de la cognition humaine. Le premier est un modèle de pensée rapide, conçu pour reproduire les réflexes et l’intuition humaine. Il a été entraîné à partir de démonstrations humaines et de données synthétiques générées via la plateforme Omniverse de Nvidia. Le second repose sur un modèle de vision et de langage et fonctionne comme un système de pensée lente, capable de prendre des décisions de manière méthodique et réfléchie, explique Nvidia. 

Selon le fabricant, GR00T N1 s’adapte aisément à des tâches courantes comme la saisie et le déplacement d’objets, que ce soit avec un ou deux bras, ainsi que le transfert d’objets d’un bras à l’autre. Il est également capable d’exécuter des tâches complexes nécessitant une analyse approfondie du contexte et la combinaison de plusieurs compétences générales. Ces capacités sont notamment adaptées à des usages dans les secteurs de la manutention, de l’emballage et de l’inspection.

Collaboration avec Disney Research

Lors de cette même conférence, Nvidia a également annoncé un partenariat avec Google DeepMind et Disney Research pour le développement de Newton, un moteur physique open-source conçu pour aider les robots à maîtriser des tâches complexes avec une plus grande précision. Disney Research sera l’un des premiers à exploiter Newton afin d’améliorer sa plateforme de personnages robotiques, qui alimente une nouvelle génération de robots de divertissement. Parmi eux, les droïdes BDX inspirés de Star Wars, particulièrement expressifs, ont fait une apparition sur scène aux côtés de Jensen Huang.