lab Hugging Face Blog · agora mesmo · releases

ServiceNow CoreAI lança AutoSynthData para gerar dados de treinamento de agentes empresariais

Traduzido do English → Português (BR)

O ServiceNow CoreAI apresenta o AutoSynthData, um pipeline que gera e valida tarefas de treinamento sintéticas para agentes empresariais alavancando falhas do modelo alvo e sucessos de um professor mais forte. O sistema identifica lacunas de capacidade por meio de avaliações diagnósticas e cria tarefas executáveis com verificadores para abordar fraquezas específicas.

As tarefas são definidas por especificações do sistema, prompts do usuário e verificadores que garantem viabilidade, realismo e dificuldade.
Uma fase "target" gera amostras centrais enquanto uma fase "multiply" as expande em variantes novedosas.
O controle de qualidade inclui verificação positiva/negativa e reparo orientado por crítica para candidatos individuais.
A revisão em nível de lote monitora cobertura e diversidade para prevenir a super-representação de famílias de tarefas fáceis.

A abordagem trata a geração de dados sintéticos como uma busca perto do limite de capacidade do modelo, permitindo que o currículo se desloque para as dificuldades restantes à medida que o agente melhora.

Importância 1/3 Confiança 1/3 Hugging Face Blog AI agents Training methods

Artigos relacionados

lab Microsoft Research Blog · há 1 d · 3 visualizações

Sistema da Microsoft Research prevê riscos de clima espacial para 66.935 subestações dos EUA

Um pipeline de aprendizado de máquina desenvolvido na Microsoft Research gera estimativas de risco de corrente geomagneticamente induzida (GIC) específicas por localização para 66.935 subestações nos Estados Unidos continentais. O sistema combina previsões de vento solar com dados geológicos locais para fornecer aos operadores da rede 30 a 60 minutos de aviso antecipado antes que riscos específicos apareçam.

arxiv arXiv cs.CL · há 3 d · 4 visualizações

ROFT melhora modelos agênticos ajustando-os em explicações autogeradas

Pesquisadores investigam o Retrospection-Only Fine-Tuning (ROFT), um procedimento online mínimo onde um agente gera explicações retrospectivas de suas próprias experiências e é ajustado finamente usando apenas a perda de previsão do próximo token nesses tokens de explicação. Este método não requer professor externo ou atualização de política baseada em recompensa.

arxiv arXiv cs.CL · há 8 d · 8 visualizações

VHD-Play gera ambientes de RL agêntico a partir de mecanismos resolvidos

O VHD-Play é um pipeline que gera ambientes diversos de aprendizado por reforço agêntico ao amostrar e resolver modelos matemáticos antes de renderizar seus processos de decisão como ferramentas com estado. Essa abordagem garante que dinâmicas executáveis e referências de pontuação de trajetória sejam herdadas diretamente do modelo resolvido, abordando os problemas de desalinhamento comuns em pipelines de geração existentes.

arxiv arXiv cs.CL · há 8 d · 10 visualizações

SkillGym internaliza habilidades humanas em LLMs para resolução de problemas do mundo real

Pesquisadores apresentam o SkillGym, um framework que transforma habilidades de agentes escritas por humanos em ambientes de treinamento executáveis e verificáveis para agentes de modelos de linguagem grandes. O sistema utiliza um pipeline de habilidade para tarefa para instanciar tarefas concretas e verificar resultados com verificadores baseados em código.

arxiv arXiv cs.AI · há 10 d · 17 visualizações

Gerador de Estado do Mundo alinha planos com mundos sintéticos para melhorar o sucesso do agente

O Gerador de Estado do Mundo (WSG) é um modelo que mantém os planos de agentes linguísticos alinhados às regras de seu ambiente de execução, reescrevendo estados após falhas. É treinado em 226K trajetórias extraídas de sete domínios sintéticos onde um programa aplica regras e verifica a alcançabilidade do objetivo.