Um estudo de 2.848 execuções do Claude Code faturadas pelo provedor revela que reduzir o contexto recuperado ou a saída de ferramentas não reduz confiavelmente o custo real faturado dos agentes de codificação. A pesquisa desafia a métrica comum de remoção de texto analisando uma campanha de 2.908 execuções em três modelos e sete repositórios.

  • O tráfego do cache de prompt dominou os custos, representando aproximadamente 87% dos custos reconstruídos e 80% da conta real.
  • Um braço que removeu 38% dos tokens brutos estimados de saída de ferramentas incorreu em um custo pareado 6,8% maior em comparação com a linha de base.
  • A compressão foi encontrada prejudicando a conclusão de tarefas ao remover evidências críticas para a ação, reduzindo o sucesso da aplicação de patch de 27/40 para 15/40 nas tarefas Go derivadas do SWE-bench.

Os autores propõem usar o custo faturado ajustado por sucesso como um padrão mais preciso para avaliar a eficiência do que apenas a redução de tokens.