Una nueva auditoría de benchmarks de recuperación multi-hop revela que Nemotron-3-Embed-8B de NVIDIA ha cerrado la brecha de rendimiento entre los embedders con licencia comercial y el ancla NV-Embed-v2 no comercial en el benchmark MuSiQue. Lanzado el 16 de julio de 2026, este modelo es la única opción con licencia comercial y autoalojamiento gratuito que se desempeña de manera indistinguible del estándar académico.
- El estudio audita cuatro sistemas líderes de MuSiQue (HippoRAG-2, PropRAG, SAG, KET-RAG), señalando que tres dependen de NV-Embed-v2 no comercial sin revelación.
- Hasta mediados de 2026, el mejor embedder con licencia comercial quedaba atrás del ancla por 2.31 puntos en Recall@5; Nemotron-3-Embed ahora iguala al ancla con una diferencia estadísticamente insignificante de +0.24 en Recall@5.
- Cada otro participante con licencia comercial y autoalojamiento gratuito se sitúa entre 5.2 y 14.6 puntos por debajo del ancla.
- La auditoría destaca una disparidad significativa en costos: tres de los cinco sistemas auditados no revelan los costos de indexación, con cifras publicadas de GraphRAG que abarcan un rango de 11x (USD 2.30 frente a USD 24.94 para un corpus de 5.64 MB).
- Extrapolado a 1 TB, esta elección no revelada separa los costos desde aproximadamente USD 428K hasta $4.6M, con los costos de construcción del grafo eclipsando los gastos de embedding y respuesta.
Los hallazgos enfatizan que los compradores deben verificar tanto los términos de licencia como los costos de indexación antes de confiar en las cifras publicadas de benchmarks, ya que la división entre lo pagado y lo gratuito impacta significativamente la viabilidad de implementación.