A NVIDIA lançou Cosmos 3, um modelo de fundação de mundo de código aberto para IA física construído em uma arquitetura de mistura de transformadores que combina raciocínio de visão, geração de mundo e predição de ação em um único sistema. O modelo está disponível em três tamanhos sob a licença OpenMDW-1.1 da Linux Foundation: Cosmos 3 Super (64B parâmetros) para modelagem de mundo de alta fidelidade, Cosmos 3 Nano (16B) para raciocínio eficiente e implantação, e Cosmos 3 Edge (4B, anunciado mas ainda não lançado) para robótica on-device e inferência de borda. O modelo foi treinado em 20 trilhões de tokens de dados multimodais, incluindo quase 1 bilhão de imagens, 400 milhões de vídeos, áudio ambiente e trajetórias de ação de robô.
Cosmos 3 classifica #1 em Artificial Analysis para geração de texto para imagem e imagem para vídeo de pesos abertos, lidera PAI-Bench para geração de mundo e Physics-IQ para imagem para vídeo, e classifica #1 em RoboLab para política de robô. Cosmos 3 Super é também o modelo de código aberto melhor classificado em VANTAGE-Bench para compreensão de visão em vídeo de câmera fixa em armazém, transporte e espaços inteligentes. Diferentemente de modelos de fundação anteriores apenas de vídeo, Cosmos 3 nativamente emite sinais de ação de robô—ângulos de articulação, posições de garra, pontos de trajetória—permitindo treinamento de política direta e geração de dados sintéticos para sistemas de IA incorporados.
A NVIDIA lançou a NVIDIA Cosmos Coalition, uma colaboração global com líderes de robótica e IA incluindo Agile Robots, Black Forest Labs, Generalist, LTX, Runway e Skild AI para contribuir modelos, pesquisa e métodos de avaliação. Desenvolvedores podem treinar Cosmos 3 em dados e hardware proprietários, e parceiros de implantação incluindo Baseten, CoreWeave, Microsoft Azure e Deep Infra oferecem inferência conteinerizada. Para arquitetos, Cosmos 3 oferece um modelo unificado único substituindo pipelines separados para raciocínio de mundo, simulação e treinamento de política—reduzindo ciclos de desenvolvimento de meses para dias.