lab Hugging Face Blog · há 11 h · releases

NVIDIA lança Cosmos 3 Edge, um modelo de 4 bilhões de parâmetros para controle de robôs em tempo real em dispositivos de borda

Traduzido do English → Português (BR)

A NVIDIA lançou o Cosmos 3 Edge, um modelo de mundo aberto com 4 bilhões de parâmetros projetado para oferecer desempenho de nível de data center em sistemas de borda com memória limitada. O modelo permite que robôs e agentes de IA de visão compreendam seu entorno, raciocinem em tempo real e gerem ações diretamente em dispositivos como os módulos NVIDIA Jetson.

O Cosmos 3 Edge opera na resolução de controle de robôs (640×360) e gera 32 ações por inferência, alcançando controle em tempo real a 15 Hz no NVIDIA Jetson Thor.
Ele ocupa o #1 entre modelos de tamanho semelhante no VANTAGE-Bench para análise de visão e estabelece o estado da arte para aprendizado de políticas robóticas.
A arquitetura combina uma torre autoregressiva para raciocínio com uma torre de difusão para previsão, compartilhando camadas de atenção multimodal para alinhar tokens de linguagem, vídeo, áudio e ação.
A NVIDIA também lançou o Cosmos 3 Edge Policy (DROID) pós-treinado no conjunto de dados DROID para tarefas de pegar e colocar, juntamente com checkpoints de referência e scripts de treinamento.

O lançamento permite que desenvolvedores implantem modelos mais próximos dos sensores no dispositivo, usando frameworks abertos para personalizar e especializar o modelo para aplicações específicas de IA física.

Importância 2/3 Confiança 1/3 Hugging Face Blog NVIDIA Open weights Robotics

Artigos relacionados

arxiv arXiv cs.LG · há 4 d

RoboTTT escala políticas robóticas para contexto de 8 mil etapas

Pesquisadores apresentam o RoboTTT, uma receita de treinamento que estende o contexto visuomotor para modelos fundamentais de robótica até 8.000 etapas sem aumentar a latência de inferência. O método integra Treinamento no Momento do Teste em políticas Visão-Linguagem-Ação usando pesos rápidos atualizados por descida de gradiente durante tanto o treinamento quanto a inferência.

arxiv arXiv cs.AI · há 4 d

RoboTTT escala políticas robóticas para contexto de 8 mil etapas

A NVIDIA apresenta o RoboTTT, um modelo fundamental e uma receita de treinamento para robôs que estende o contexto visuomotor para 8.000 etapas sem aumentar a latência de inferência. Ao integrar o Test-Time Training em políticas Vision-Language-Action, o sistema comprime o histórico no espaço de pesos usando pesos rápidos atualizados por descida do gradiente.

lab Hugging Face Blog · há 5 d · 2 visualizações

NVIDIA lança modelos de embedding Nemotron 3 Embed que ocupam o #1 no RTEB

A NVIDIA lançou o Nemotron 3 Embed, uma coleção de modelos de embedding abertos e comercialmente disponíveis projetados para melhorar a qualidade de recuperação para RAG em escala de produção, recuperação agêntica, recuperação de código e memória de agentes. A coleção inclui um modelo de 8B que ocupa a #1 posição geral no ranking do RTEB, junto com variantes eficientes de 1B otimizadas para implantação.

media r/LocalLLaMA · há 7 d

NVIDIA lança os modelos Nemotron-3-Embed 1B e 8B

A NVIDIA lançou os modelos de incorporação de texto Nemotron-3-Embed 1B e 8B, otimizados para tarefas de recuperação e similaridade semântica. Esses modelos foram projetados para servir como componentes fundamentais em sistemas de Geração Aumentada por Recuperação (RAG) baseados em texto.

lab NVIDIA Technical Blog · há 9 d

NVIDIA apresenta método para avaliar políticas de robôs de propósito geral

A NVIDIA aborda o desafio de avaliar rigorosamente os modelos fundamentais de robótica, que agora podem seguir instruções em linguagem natural para manipular objetos. A empresa identifica a avaliação como um problema crítico não resolvido e apresenta um novo método para abordar essas questões.