Tech • IA • Crypto
Le Big Bang de l’IA vient d’avoir lieu : Cosmos 3
10/10INTRO
NVIDIA a dévoilé une pile intégrée pour « l’IA physique », combinant un modèle du monde, un CPU orienté agents et une plateforme de robot humanoïde afin d’accélérer les systèmes autonomes dans le monde réel.
POINTS CLÉS
Modèle du monde Cosmos 3
NVIDIA a présenté Cosmos 3, un modèle fondation multimodal conçu pour simuler et prédire les interactions physiques du monde réel. Il intègre vision, raisonnement, génération de mondes et prédiction d’actions, permettant aux machines d’anticiper les résultats plutôt que de simplement décrire des scènes. Le système est entraîné sur d’énormes ensembles de données multimodales, atteignant environ 20 billions de tokens, incluant vidéo, images, audio, texte et trajectoires d’action.
Entraînement robotique plus rapide
Cosmos 3 s’attaque à un goulet d’étranglement majeur en robotique: des cycles d’entraînement lents et coûteux. En générant des simulations réalistes de mouvement, de force et d’interaction, il peut réduire les délais d’entraînement et d’évaluation de plusieurs mois à quelques jours. Cette approche limite les dommages matériels et les risques de sécurité en déplaçant l’apprentissage vers des environnements synthétiques avant le déploiement réel.
Passage des modèles de langage aux modèles du réel
Ce développement reflète un virage plus large de l’industrie vers les modèles du monde capturant la causalité physique. Contrairement à l’IA traditionnelle entraînée sur du texte internet, l’IA physique nécessite une compréhension du mouvement, des collisions et de la dynamique spatiale. Des acteurs majeurs comme Google DeepMind, OpenAI, Tesla et d’autres poursuivent des approches similaires, signalant une compétition de plateformes émergente.
Écosystème Cosmos Coalition
NVIDIA construit un écosystème autour de Cosmos via la Cosmos Coalition, avec des partenaires tels que Agile Robots, Black Forest Labs, Runway et d’autres. L’initiative vise à standardiser les outils et accélérer l’adoption du développement d’IA basé sur la simulation dans la robotique et les systèmes autonomes.
CPU Vera pour agents IA
NVIDIA a également lancé Vera, décrit comme le premier CPU conçu pour les charges de travail d’IA agentique. Contrairement aux GPU optimisés pour l’entraînement des modèles, Vera se concentre sur la coordination de tâches comme l’usage d’outils, le déplacement de données et l’exécution de workflows. L’entreprise revendique des gains de performance jusqu’à 1,8× par rapport aux processeurs x86 traditionnels sur ces charges.
Importance croissante de l’IA agentique
Les systèmes agentiques se distinguent des chatbots en exécutant des tâches multi-étapes, comme lancer du code, interroger des bases de données et interagir avec des outils externes. Cette évolution augmente la demande sur les CPU dans les centres de données, positionnant Vera comme un élément clé de ce que NVIDIA appelle les « usines d’IA » du futur.
Adoption industrielle majeure
Des entreprises comme Anthropic, OpenAI, xAI, Oracle Cloud et CoreWeave devraient adopter des systèmes basés sur Vera. NVIDIA estime l’opportunité de marché jusqu’à 200 milliards de dollars, avec des partenaires matériels comme Dell, HPE, Lenovo et Asus préparant des déploiements à grande échelle.
Plateforme humanoïde Isaac Groot
Pour compléter la pile, NVIDIA a introduit le robot humanoïde de référence Isaac Groot. Construit sur un châssis Unitree, le robot mesure près de 1,80 m, pèse environ 150 livres et dispose de 75 degrés de liberté, incluant des mains tactiles avancées à cinq doigts pour des tâches de manipulation complexes.
Capteurs et calcul avancés
Le robot intègre une vision stéréo avec un champ de vision de 140°, des caméras montées aux poignets et une IA embarquée alimentée par le système Jetson AGX Thor délivrant 270 téraflops. Cela permet perception, planification et contrôle en local sans dépendre entièrement de calculs distants.
Standardisation du développement robotique
La stratégie de NVIDIA vise à unifier matériel et logiciel via des plateformes comme Jetson, Omniverse, Isaac et Cosmos. En proposant un système de référence complet, l’entreprise cherche à devenir la couche d’infrastructure par défaut pour la robotique, à l’image de son rôle dans le calcul IA.
Implications militaires et industrielles
Des développements parallèles montrent des déploiements plus immédiats. Foundation Future Industries a testé des robots humanoïdes en Ukraine pour des tâches logistiques dangereuses, comme le transport de fournitures en zones à risque. L’entreprise a obtenu un contrat du Pentagone de 24 millions de dollars et explore des applications de défense plus larges.
Des défis persistent
Malgré les progrès rapides, des obstacles importants subsistent: autonomie des batteries, durabilité, dextérité et fiabilité dans des environnements imprévisibles. Les experts soulignent un écart notable entre démonstrations contrôlées et déploiements réels, notamment dans des contextes à haut risque comme le combat.
CONCLUSION
NVIDIA se positionne comme la plateforme de base de l’IA physique, mais à mesure que ces technologies s’étendent au monde réel et militaire, la course technologique s’accompagne d’enjeux complexes de sécurité, d’éthique et de géopolitique.