Cosmos 3 Edge : NVIDIA fait passer les world models sur l'appareil et renouvelle son alliance industrielle au Japon

NVIDIA a annoncé Cosmos 3 Edge, la variante la plus légère de la famille Cosmos : 4 milliards de paramètres, construite sur la famille de modèles Nemotron de NVIDIA. D'après la fiche technique relayée par MarkTechPost, le modèle adopte une structure Mixture-of-Transformers avec une tour autorégressive et une tour à diffusion, et intègre un reasoner dense de 2 milliards de paramètres qui traite des tokens de vision, de texte, d'audio et d'action sur des corps différents, des caméras aux bras robotisés jusqu'aux humanoïdes. Cette configuration est pensée pour l'inférence sur GPU RTX, systèmes DGX et plateformes Jetson, y compris les nouveaux modules Jetson T2000 et T3000. Selon les chiffres avancés par NVIDIA, le modèle permet un contrôle en temps réel à 15 Hz sur Jetson Thor et gère des espaces d'action de 9 à 29 dimensions.

L'entreprise a en parallèle renforcé sa position dans l'industrie manufacturière japonaise : vingt-deux sociétés, dont FANUC, Honda R&D, Sony Group Corporation et Yaskawa Electric, figurent dans la coalition Cosmos. Ces entités ont fait part de leur intention de rejoindre l'initiative, mais aucun engagement contractuel ferme ni volume économique n'a été précisé. L'écosystème logiciel a été enrichi de nouvelles bibliothèques Metropolis et de l'intégration de Cosmos dans la plateforme robotique ouverte Isaac pour les flux de simulation-to-real, des outils qui, selon NVIDIA, permettent de construire des systèmes de video intelligence environ six fois plus vite avec des agents de codage.

Côté performances, NVIDIA annonce une résolution de contrôle de 640x360 et revendique la première place du benchmark VANTAGE-Bench dans la catégorie des modèles de 4B, des résultats qui restent à valider de façon indépendante. Les poids du modèle ont été publiés sur Hugging Face sous licence OpenMDW-1.1 de la Linux Foundation, même si la vérification directe de la fiche technique est limitée par l'authentification exigée par la plateforme. Cosmos 3 Edge marque donc un pas vers la décentralisation de l'IA physique, avec quelques incertitudes sur les données de benchmark et sur les détails de mise en œuvre de la nouvelle gamme Jetson.

— Olya