Alliance des robots. Deuxième journée de la conférence GTC 2024

La conférence GTC 2024 à San Jose est presque entièrement dédiée à l’intelligence artificielle. Mais le 19 mars, Nvidia a également annoncé plusieurs produits robotiques importants.

Je suis GR00T

L’entreprise a présenté le projet GR00T (Generalist Robot 00 Technology), une intelligence artificielle multimodale conçue spécifiquement pour les androïdes.

Jim Fan, directeur de recherche et responsable de l’IA incarnée chez Nvidia, a écrit qu’avec le GR00T, les robots seront capables de comprendre des instructions via le langage, la vidéo et l’observation humaine pour effectuer diverses tâches.

Aujourd’hui, c’est le début de notre projet visant à résoudre l’AGI incarnée dans le monde physique. Je suis très heureux d’annoncer le projet GR00T, notre nouvelle initiative visant à créer un modèle de base à usage général pour l’apprentissage des robots humanoïdes.

Le modèle GR00T permettra à un robot de comprendre le multimodal… pic.twitter.com/EqN19Z3cXH

– Jim Fan (@DrJimFan) 18 mars 2024

Selon Jensen Huang, PDG de Nvidia, GR00T permettra aux robots d’apprendre la coordination et des mouvements complexes, de s’adapter à ce qui se passe autour d’eux et d’interagir avec le monde réel. Lors du discours, le chef de l’entreprise a présenté plusieurs androïdes équipés du GR00T et effectuant diverses tâches.

Pendant les tests, le produit IA n’est disponible que pour certaines sociétés partenaires, notamment 1X Technologies, Agility Robotics, Apptronik, Boston Dynamics, Figure AI, Fourier Intelligence, Sanctuary AI, Unitree Robotics et XPENG Robotics.

« La création de modèles de base pour les robots humanoïdes est aujourd’hui l’un des défis les plus passionnants de l’IA. Des chercheurs de premier plan du monde entier s’associent pour faire des pas de géant vers la robotique à usage général », a déclaré Huang.

Pour le moment, les détails sur l’architecture interne du GR00T sont inconnus. Le matériel fonctionne grâce à la nouvelle plateforme informatique Jetson Thor.

Nouvel ajout à la famille Jetson

Jetson Thor est capable d’effectuer des tâches complexes de communication homme-machine. La plateforme est basée sur le SoC Thor et inclut le dernier GPU Nvidia Blackwell.

Performance GPU les systèmes sont huit fois supérieurs à la version précédente de Jetson Orin.

Propulsé par Thor, le GR00T est construit à l’aide des outils Isaac Robotic Platform de Nvidia, y compris le nouveau Isaac Lab pour l’apprentissage par renforcement.

Isaac Manipulator propose des bibliothèques pour aider les fabricants de bras robotiques à ajouter de nouveaux mouvements à leurs produits et à augmenter leur dextérité. Ils comprennent des modèles pour détecter et suivre des objets, les évaluer Postes 6D et créer des prévisions précises sur les interactions avec l’environnement.

Isaac Perceptor vous aide à relever les défis liés au contrôle des androïdes dans des environnements non structurés. Pour la perception 3D et la vision volumétrique, une vision multi-caméras à 360 degrés et des algorithmes d’intelligence artificielle accélérés sont utilisés.

Des nouvelles passionnantes de #CGV24! NVIDIA Isaac révolutionne la robotique dans la fabrication et la logistique. Avec #GenAI & simulation avancée, NVIDIA Isaac accélère les robots compatibles avec l’IA. Découvrez les nouveaux modèles de base, le cadre d’apprentissage des robots et bien plus encore. https://t.co/nteaW1K5tl pic.twitter.com/4xzpUakpfe

– NVIDIA Robotique (@NVIDIARobotics) 18 mars 2024

« Des nouvelles passionnantes de GTC24 ! Nvidia Isaac révolutionne la robotique ! Avec GenAI et la simulation avancée, Nvidia Isaac accélère les robots compatibles avec l’IA. Découvrez de nouveaux modèles de base, un système de formation de robots et bien plus encore », a déclaré la division robotique de l’entreprise.

Le 19 mars, on a également appris l’émergence d’une alliance dans le domaine de la robotique.

Les robots rejoignent l’Alliance

L’Open Source Robotics Foundation a lancé l’Open Source Robotics Alliance (OSRA).

Nous sommes heureux d’annoncer notre partenariat avec @OpenRoboticsOrg dans le lancement de l’Open Source Robotics Alliance. En s’associant à Open Robotics, #NVIDIA continuera à apporter le calcul accéléré et #IA à l’open source #robotique.

En savoir plus : https://t.co/9XfX6gvtuO pic.twitter.com/qgCDCRtY2B

– NVIDIA Robotique (@NVIDIARobotics) 19 mars 2024

« Nous sommes heureux d’annoncer notre collaboration avec OpenRoboticsOrg pour créer l’Open Source Robotics Alliance. En unissant nos forces avec Open Robotics, nous continuerons à apporter le calcul accéléré et l’IA à la robotique open source », indique le communiqué.

La société est devenue le premier membre platine de l’OSRA. Intrinsic et Qualcomm ont rejoint l’alliance avec le même statut.

Rappelons que lors du premier jour de la conférence GTC 2024, Nvidia a annoncé une nouvelle génération de puces et de logiciels d’IA pour travailler avec de grands modèles de langage.

Vous avez trouvé une erreur dans le texte ? Sélectionnez-le et appuyez sur CTRL+ENTRÉE