マルチホップ検索ベンチマークの新たな監査により、NVIDIAのNemotron-3-Embed-8Bが、MuSiQueベンチマークにおいて商用ライセンスの埋め込みモデルと非商用のNV-Embed-v2アンカー間の性能差を解消したことが明らかになった。2026年7月16日にリリースされたこのモデルは、学術基準と見分けがつかないパフォーマンスを発揮する唯一の商用ライセンスかつ無料セルフホスティング可能な選択肢である。

  • 本調査は4つの主要なMuSiQueシステム(HippoRAG-2、PropRAG、SAG、KET-RAG)を監査し、3つが開示なく非商用のNV-Embed-v2に依存していることを指摘した。
  • 2026年中頃まで、最良の商用ライセンス埋め込みモデルはアンカーよりRecall@5で2.31ポイント遅れていたが、Nemotron-3-Embedは現在、Recall@5で+0.24という統計的に有意差のない差でアンカーと同等のパフォーマンスを達成している。
  • 他のすべての商用ライセンスかつ無料セルフホスティング可能な参加者は、アンカーより5.2から14.6ポイント低い位置にある。
  • 監査は顕著なコスト格差を浮き彫りにした:監査された5つのシステムのうち3つがインデックス作成コストを開示しておらず、公開されているGraphRAGの数値は11倍の範囲(5.64 MBのコーパスでUSD 2.30対USD 24.94)に及んでいる。
  • 1 TBに外挿すると、この開示されない選択によりコストは約USD 428Kから$4.6Mに分かれ、グラフ構築コストが埋め込みおよび回答費用を圧倒している。

これらの知見は、有料と無料の区別がデプロイメントの成否に大きく影響するため、購入者は公開されたベンチマーク数値を信頼する前にライセンス条項とインデックス作成コストの両方を確認しなければならないことを強調している。