media Hugging Face Forums · há 18 h · open_models

Agent-ProSAT abre o código do solucionador programático para síntese de CoT

Traduzido do English → Português (BR)

Shehab Anwer liberou o Agent-ProSAT, um pipeline que gera conjuntos de dados de Cadeia de Pensamento (CoT) fazendo com que um agente codifique e melhore iterativamente solucionadores programáticos verificáveis em vez de depender do texto gerado pelo modelo.

O sistema usa loops de autocorreção para validar a solidez lógica contra a verdade fundamental e amostras retidas.
Foi avaliado no Desafio de Raciocínio Nemotron da NVIDIA usando quebra-cabeças lógicos de "Alice no País das Maravilhas" para testar restrições espaciais e lógicas.
A abordagem visa reduzir riscos de alucinação e melhorar a utilização de tokens em pipelines SFT/RL por meio de revisão programática.

O autor compartilha a base de código, um notebook do Kaggle para ajuste fino e o conjunto de dados ProSAT CoT resultante no Hugging Face.

Importância 1/3 Novo ambiente de avaliação com diferenciais Confiança 1/3 Hugging Face Forums AI agents Training methods

Ler original

Framework acelerado por IA valida rápida atualização profissional em cinco etapas

Os autores apresentam um framework de ponta a ponta que aplica aceleração por IA a cinco etapas de aquisição de conhecimento, desenvolvimento de conteúdo, revisão, ensino e avaliação. Esta abordagem visa abordar a crescente lacuna de habilidades corporativas, melhorando tanto a eficiência da produção quanto a do aprendizado.

lab NVIDIA Technical Blog · há 6 d · 1 visualização

NVIDIA NeMo habilita fluxos de trabalho de pesquisa autônoma com habilidades de agentes RL

O NVIDIA NeMo fornece capacidades para codificar agentes de IA que operam em fluxos de trabalho de aprendizado de máquina de longa duração, direcionados especificamente à pesquisa de aprendizado por reforço.

media r/LocalLLaMA · há 6 d

Dan Austin treina Qwen3.6-35B-A3B com RL para gerar jobs de treinamento para modelos menores do Qwen

Dan Austin disponibilizou como código aberto um sistema em que um agente Qwen3.6-35B-A3B treinado com RL escreve e submete autonomamente jobs de treinamento completos para modelos menores do Qwen (0,6B ou 1,7B). O agente utiliza o framework prime-rl para definir ambientes, recompensas, conjuntos de dados e hiperparâmetros, que são então executados em GPUs da Runpod.

media r/LocalLLaMA · há 6 d

SAO introduz otimização assíncrona de único rollout para treinamento estável de RL agêntico

O artigo apresenta a Single-rollout Asynchronous Optimization (SAO), um método projetado para abordar desafios de estabilidade e fora da política no aprendizado por reforço assíncrono para grandes modelos de linguagem. Ao substituir a amostragem em grupo pela amostragem de único rollout, a abordagem reduz os efeitos fora da política e melhora a generalização durante tarefas agênticas de longo prazo.

arxiv arXiv cs.CL · há 6 d

OpenSquilla introduz roteamento agêntico nativo de Harness para criar um ciclo de dados

O artigo propõe o roteamento agêntico nativo de Harness, um paradigma em nível de etapa que seleciona modelos com base no estado completo do ambiente de execução (execution harness) em vez de otimizar as compensações de custo-qualidade de uma única interação. Esta abordagem trata cada decisão de roteamento como um registro de dados estruturado para formar um ciclo de dados nativo de Harness, onde os rastros de execução treinam roteadores e modelos melhores.