NVIDIA a annoncé lors de GTC le lancement du modèle de base de robot humanoïde général GROOT N1. Il s'agit du premier modèle de base open source général ouvert aux équipes de développement de robots du monde entier et d'un cadre de simulation d'entraînement d'inférence, capable d'accélérer la technologie de développement des robots humanoïdes. GR00T N1 est le premier modèle entièrement personnalisable que NVIDIA pré-entraînera et publiera pour les équipes de développeurs de robots du monde entier.
Le fondateur de NVIDIA, Jensen Huang, a déclaré que l'ère des robots généralistes (Generalist Robotics) est arrivée. Grâce au modèle de base NVIDIA Isaac GR00T N1 et au nouveau cadre d'apprentissage des données pour robots, les équipes de développement de robots du monde entier peuvent accélérer l'ouverture d'un nouveau chapitre pour les robots AI du futur. Un robot généraliste, comme son nom l'indique, est capable d'entraîner un robot à effectuer n'importe quel travail, transformant le robot en un talent capable de tout faire. Il peut être un opérateur ou un assistant ménager, et toutes les tâches de travail imaginables peuvent être exécutées par le robot.
Le modèle d'architecture à double système GR00T N1 s'inspire des modes de compréhension cognitive humaine.
Le modèle de base GR00T N1 adopte une architecture à double système, inspirée des modes de compréhension cognitive humaine. "Système 1" est un modèle d'action de pensée rapide, reflétant la réaction ou l'intuition humaine, tandis que "Système 2" est un modèle de pensée lente, utilisé pour réfléchir profondément et prendre des décisions de manière ordonnée.
Dans le cadre de ce modèle de langage visuel, le système 2 peut réfléchir à l'environnement ainsi qu'aux instructions reçues pour planifier des actions. Le système 1 entraîne les machines sur la base de données d'entraînement humain et d'une grande quantité de données de simulation synthétiques générées par la plateforme NVIDIA Omniverse, transformant ces plans en activités de robots de continuité précise.
Le GR00T N1 peut facilement exécuter des tâches courantes, telles que saisir des objets, déplacer des articles avec un ou deux bras, et transférer des objets d'un bras à l'autre, ou exécuter des tâches multi-étapes dans le même contexte, pouvant être appliqué à des scénarios tels que la manutention, l'emballage et l'inspection. Les développeurs et les chercheurs peuvent utiliser des données synthétiques réelles ou simulées pour la formation ultérieure des robots humanoïdes.
Lors de la conférence principale sur le GTC, Jensen Huang a démontré l'exécution de tâches de majordome par le robot humanoïde NEO Gamma, utilisant un entraînement postérieur basé sur GR00T N1. Les fonctionnalités autonomes du robot, nommé NEO Gamma, sont le résultat de la collaboration entre la startup de robots 1x AI et l'apprentissage automatique AI de NVIDIA. Imaginez une scène de fainéant chez soi, où un humain entraîne un robot majordome pour l'aider à faire le ménage ou à agir comme aide-cuisine pour des tâches ménagères ennuyeuses, tandis qu'il se prélasse paresseusement sur le canapé à écouter de la musique. Le robot majordome peut être entraîné selon les besoins personnels, apprenant les mouvements de manière à imiter la cognition humaine.
Bernt Børnich, PDG de 1X Technologies, affirme que l’avenir des robots humanoïdes réside dans l’adaptabilité et la capacité d’apprentissage. Le GR00T N1 de NVIDIA améliore considérablement l’inférence et les compétences du robot, et tout en développant le modèle de l’entreprise, le GR00T N1 peut être entièrement déployé sur NEO Gamma avec une petite quantité de données lors du développement du modèle de l’entreprise.
D'autres développeurs de robots humanoïdes ayant obtenu à l'avance les droits de développement de GR00T N1 incluent Agility Robotics, Boston Dynamics, Mentee Robotics et NEURA Robotics.
NVIDIA a collaboré avec Google DeepMind et Disney Research pour développer Newton
NVIDIA a annoncé une collaboration avec Google DeepMind et Disney Research pour développer le moteur matériel Open Source Newton, permettant aux Bots d'apprendre à traiter des tâches complexes de manière plus précise.
Newton est construit sur le framework NVIDIA Warp, optimisant l'apprentissage des Bots et étant compatible avec des frameworks de simulation tels que MuJoCo de Google DeepMind et NVIDIA Isaac Lab.
Google DeepMind et NVIDIA collaborent au développement de MuJoCo-Warp, qui devrait accélérer les charges de travail d'apprentissage automatique des robots de plus de 70 fois, et sera proposé aux développeurs via la bibliothèque Open Source MJX de Google DeepMind et Newton.
Le robot BD1 de la série de films Star Wars apparaît dans le monde réel.
Disney Research est l'une des premières entreprises à utiliser Newton. Huang Renxun a présenté le robot BDX Droids sur scène lors de sa conférence GTC, inspiré par le personnage robotique BD1 de la série de films Star Wars. Kyle Laughlin, vice-président senior de Disney Imagineering, a déclaré que la collaboration avec NVIDIA leur permet de créer des personnages robots plus attrayants que jamais, générant des conceptions industrielles de robots plus captivantes pour l'équipe de développement, alliant l'esthétique et les mouvements des robots à la technologie de NVIDIA.
NVIDIA Isaac GR00T génération de plans d'assistance Bots formation avancée
Des outils de données de haute qualité sont essentiels pour développer des bots, mais le coût d’acquisition des données est élevé. La manipulation simulée NVIDIA Isaac GR00T pour générer des plans permet de résoudre ce problème. Les plans sont basés sur les modèles de base mondiaux d’Omniverse et de NVIDIA Cosmos Transfer, ce qui permet aux développeurs de générer des données synthétiques simulées pour un grand nombre de tâches opérationnelles avec un petit nombre de visites humaines. NVIDIA a utilisé Blueprints pour générer 780 000 trajectoires synthétiques en 11 heures, soit l’équivalent de neuf mois consécutifs de données de forage humain. En combinant des données synthétiques avec des données réelles, NVIDIA offre 40 % de performances en plus sur le GR00T N1 qu’en utilisant uniquement des données réelles.
NVIDIA a publié le jeu de données GR00T N1 Open Physical AI pour fournir des données d'entraînement aux équipes de développeurs, qui peuvent obtenir des informations sur Hugging Face.
Cet article annonce que NVIDIA a lancé le modèle de base de robot humanoïde Open Source Isaac GR00T N1, apparu pour la première fois dans Chain News ABMedia.
Le contenu est fourni à titre de référence uniquement, il ne s'agit pas d'une sollicitation ou d'une offre. Aucun conseil en investissement, fiscalité ou juridique n'est fourni. Consultez l'Avertissement pour plus de détails sur les risques.
NVIDIA a annoncé le lancement du modèle de base humanoïde open source Isaac GR00T N1.
NVIDIA a annoncé lors de GTC le lancement du modèle de base de robot humanoïde général GROOT N1. Il s'agit du premier modèle de base open source général ouvert aux équipes de développement de robots du monde entier et d'un cadre de simulation d'entraînement d'inférence, capable d'accélérer la technologie de développement des robots humanoïdes. GR00T N1 est le premier modèle entièrement personnalisable que NVIDIA pré-entraînera et publiera pour les équipes de développeurs de robots du monde entier.
Le fondateur de NVIDIA, Jensen Huang, a déclaré que l'ère des robots généralistes (Generalist Robotics) est arrivée. Grâce au modèle de base NVIDIA Isaac GR00T N1 et au nouveau cadre d'apprentissage des données pour robots, les équipes de développement de robots du monde entier peuvent accélérer l'ouverture d'un nouveau chapitre pour les robots AI du futur. Un robot généraliste, comme son nom l'indique, est capable d'entraîner un robot à effectuer n'importe quel travail, transformant le robot en un talent capable de tout faire. Il peut être un opérateur ou un assistant ménager, et toutes les tâches de travail imaginables peuvent être exécutées par le robot.
Le modèle d'architecture à double système GR00T N1 s'inspire des modes de compréhension cognitive humaine.
Le modèle de base GR00T N1 adopte une architecture à double système, inspirée des modes de compréhension cognitive humaine. "Système 1" est un modèle d'action de pensée rapide, reflétant la réaction ou l'intuition humaine, tandis que "Système 2" est un modèle de pensée lente, utilisé pour réfléchir profondément et prendre des décisions de manière ordonnée.
Dans le cadre de ce modèle de langage visuel, le système 2 peut réfléchir à l'environnement ainsi qu'aux instructions reçues pour planifier des actions. Le système 1 entraîne les machines sur la base de données d'entraînement humain et d'une grande quantité de données de simulation synthétiques générées par la plateforme NVIDIA Omniverse, transformant ces plans en activités de robots de continuité précise.
Le GR00T N1 peut facilement exécuter des tâches courantes, telles que saisir des objets, déplacer des articles avec un ou deux bras, et transférer des objets d'un bras à l'autre, ou exécuter des tâches multi-étapes dans le même contexte, pouvant être appliqué à des scénarios tels que la manutention, l'emballage et l'inspection. Les développeurs et les chercheurs peuvent utiliser des données synthétiques réelles ou simulées pour la formation ultérieure des robots humanoïdes.
Lors de la conférence principale sur le GTC, Jensen Huang a démontré l'exécution de tâches de majordome par le robot humanoïde NEO Gamma, utilisant un entraînement postérieur basé sur GR00T N1. Les fonctionnalités autonomes du robot, nommé NEO Gamma, sont le résultat de la collaboration entre la startup de robots 1x AI et l'apprentissage automatique AI de NVIDIA. Imaginez une scène de fainéant chez soi, où un humain entraîne un robot majordome pour l'aider à faire le ménage ou à agir comme aide-cuisine pour des tâches ménagères ennuyeuses, tandis qu'il se prélasse paresseusement sur le canapé à écouter de la musique. Le robot majordome peut être entraîné selon les besoins personnels, apprenant les mouvements de manière à imiter la cognition humaine.
Bernt Børnich, PDG de 1X Technologies, affirme que l’avenir des robots humanoïdes réside dans l’adaptabilité et la capacité d’apprentissage. Le GR00T N1 de NVIDIA améliore considérablement l’inférence et les compétences du robot, et tout en développant le modèle de l’entreprise, le GR00T N1 peut être entièrement déployé sur NEO Gamma avec une petite quantité de données lors du développement du modèle de l’entreprise.
D'autres développeurs de robots humanoïdes ayant obtenu à l'avance les droits de développement de GR00T N1 incluent Agility Robotics, Boston Dynamics, Mentee Robotics et NEURA Robotics.
NVIDIA a collaboré avec Google DeepMind et Disney Research pour développer Newton
NVIDIA a annoncé une collaboration avec Google DeepMind et Disney Research pour développer le moteur matériel Open Source Newton, permettant aux Bots d'apprendre à traiter des tâches complexes de manière plus précise.
Newton est construit sur le framework NVIDIA Warp, optimisant l'apprentissage des Bots et étant compatible avec des frameworks de simulation tels que MuJoCo de Google DeepMind et NVIDIA Isaac Lab.
Google DeepMind et NVIDIA collaborent au développement de MuJoCo-Warp, qui devrait accélérer les charges de travail d'apprentissage automatique des robots de plus de 70 fois, et sera proposé aux développeurs via la bibliothèque Open Source MJX de Google DeepMind et Newton.
Le robot BD1 de la série de films Star Wars apparaît dans le monde réel.
Disney Research est l'une des premières entreprises à utiliser Newton. Huang Renxun a présenté le robot BDX Droids sur scène lors de sa conférence GTC, inspiré par le personnage robotique BD1 de la série de films Star Wars. Kyle Laughlin, vice-président senior de Disney Imagineering, a déclaré que la collaboration avec NVIDIA leur permet de créer des personnages robots plus attrayants que jamais, générant des conceptions industrielles de robots plus captivantes pour l'équipe de développement, alliant l'esthétique et les mouvements des robots à la technologie de NVIDIA.
NVIDIA Isaac GR00T génération de plans d'assistance Bots formation avancée
Des outils de données de haute qualité sont essentiels pour développer des bots, mais le coût d’acquisition des données est élevé. La manipulation simulée NVIDIA Isaac GR00T pour générer des plans permet de résoudre ce problème. Les plans sont basés sur les modèles de base mondiaux d’Omniverse et de NVIDIA Cosmos Transfer, ce qui permet aux développeurs de générer des données synthétiques simulées pour un grand nombre de tâches opérationnelles avec un petit nombre de visites humaines. NVIDIA a utilisé Blueprints pour générer 780 000 trajectoires synthétiques en 11 heures, soit l’équivalent de neuf mois consécutifs de données de forage humain. En combinant des données synthétiques avec des données réelles, NVIDIA offre 40 % de performances en plus sur le GR00T N1 qu’en utilisant uniquement des données réelles.
NVIDIA a publié le jeu de données GR00T N1 Open Physical AI pour fournir des données d'entraînement aux équipes de développeurs, qui peuvent obtenir des informations sur Hugging Face.
Cet article annonce que NVIDIA a lancé le modèle de base de robot humanoïde Open Source Isaac GR00T N1, apparu pour la première fois dans Chain News ABMedia.