Uma nova auditoria de benchmarks de recuperação multi-hop revela que o Nemotron-3-Embed-8B da NVIDIA fechou a lacuna de desempenho entre incorporadores com licença comercial e o âncora não comercial NV-Embed-v2 no benchmark MuSiQue. Lançado em 16 de julho de 2026, este modelo é a única opção com licença comercial e gratuita para auto-hospedagem que tem desempenho indistinguível do padrão acadêmico.
- O estudo audita quatro sistemas líderes do MuSiQue (HippoRAG-2, PropRAG, SAG, KET-RAG), observando que três dependem do NV-Embed-v2 não comercial sem divulgação.
- Até meados de 2026, o melhor incorporador com licença comercial ficava atrás do âncora em 2,31 pontos de Recall@5; o Nemotron-3-Embed agora iguala o âncora com uma diferença estatisticamente insignificante de +0,24 no Recall@5.
- Cada outro participante com licença comercial e gratuito para auto-hospedagem fica entre 5,2 e 14,6 pontos abaixo do âncora.
- A auditoria destaca uma disparidade significativa de custos: três dos cinco sistemas auditados não divulgam os custos de indexação, com valores publicados de GraphRAG abrangendo uma faixa de 11x (USD 2,30 vs USD 24,94 para um corpus de 5,64 MB).
- Extrapolação para 1 TB: essa escolha não divulgada separa os custos de aproximadamente USD 428K a $4,6M, com os custos de construção do grafo superando em muito as despesas de incorporação e resposta.
As descobertas enfatizam que os compradores devem verificar tanto os termos de licenciamento quanto os custos de indexação antes de confiar nos números publicados dos benchmarks, pois a divisão entre pago e gratuito impacta significativamente a viabilidade de implantação.