NVIDIA Lança Cosmos World Foundation Models para Avanço da IA Física

Tecnologia Inteligência Artificial Inovação

A NVIDIA anunciou o lançamento dos Cosmos World Foundation Models (WFMs), uma inovadora família de modelos pré-treinados destinados à geração de vídeos e estados de mundos conscientes da física, com o intuito de impulsionar o desenvolvimento da inteligência artificial física. A iniciativa foi divulgada em 7 de janeiro de 2025, no site oficial da NVIDIA.

A visualization in the style of a flat, corporate vector illustration set in a 2D perspective. The primary scene consists of a robot interacting in a virtual environment, embodying the practical applications of AI models in real-world scenarios. Snapshots of digital circuits, with futuristic blue, green, and silvery colors, emphasize the high-tech nature of the content and pervade the background. The ambiance appears promising and driven by innovation, represented by the simulated realities and the technology elements. The background should be white and devoid of any textures, putting the focus squarely on the action in the foreground.

Imagem gerada utilizando Dall-E 3

Os Cosmos WFMs incluem modelos autoregressivos e de difusão, otimizados para gerações Text-to-World e Video-to-World. Esses modelos têm aplicações significativas em áreas como o desenvolvimento de modelos de políticas para robótica, veículos autônomos e sistemas de IA física.

Um dos aspectos centrais dos Cosmos é o sistema de segurança conhecido como Cosmos guardrails, que implementa medidas preventivas e de avaliação para garantir a integridade dos prompts e a consistência dos resultados gerados. Os modelos Cosmos se destacaram em benchmarks de consistência 3D e alinhamento físico, superando os modelos de síntese de vídeo existentes.

A formação dos Cosmos WFMs envolveu o treinamento em 20 milhões de horas de dados de vídeo, utilizando 10.000 GPUs NVIDIA H100, abordando ações como manipulação de objetos e movimento de câmera. Os modelos estão disponíveis para desenvolvedores, permitindo integração com a plataforma NVIDIA Omniverse, especialmente em cenários multiverso.

Desenvolvimento e avaliação de modelos de políticas.
Modelagem preditiva de foresight.
Integração com a plataforma NVIDIA Omniverse.
Processamento de dados em alta velocidade com o NVIDIA NeMo Curator.
Geração de vídeos conscientes da física a partir de entradas textuais ou visuais.

Com a contínua evolução dos Cosmos, a NVIDIA busca integrar esses modelos a plataformas de IA física mais amplas, abordando desafios do mundo real em robótica e veículos autônomos. O futuro parece promissor, com a expansão das capacidades dos modelos e a melhoria contínua da curadoria de dados.

A NVIDIA posiciona os Cosmos WFMs como um marco no avanço da IA física, oferecendo ferramentas poderosas para desenvolvedores. Para se aprofundar neste tema e acompanhar as evoluções na área, recomenda-se que os leitores assinem nossa newsletter e fiquem atentos a conteúdos atualizados diariamente.