MOTHRAGというグラフフリーの密索引システムは、HotpotQA、2WikiMultiHopQA、MuSiQueのベンチマークにおいて、グラフベースのRAGシステムを上回る性能を示した。著者らは、頻繁に変化するデータにおいては、知識グラフによる精度向上が、その再構築に伴う継続的なコストによって相殺されると主張している。

  • HotpotQAでは、MOTHRAGは78.1点を記録し、GraphRAGの68.6点、HippoRAG 2の75.5点、RAPTORの69.5点を上回った。
  • 2WikiMultiHopQAでは、MOTHRAGは76.3点を達成し、GraphRAG（58.6）、HippoRAG 2（71.0）、RAPTOR（52.1）を凌駕した。
  • MuSiQueでは、MOTHRAGは50.5点に達し、GraphRAG（38.5）、HippoRAG 2（48.6）、RAPTOR（28.9）を下回った。
  • アップデートには再学習や再構築を必要とせず、埋め込みと追加のみで済み、コモディティAPIではクエリあたり約0.03ドルのコストで済む。

著者らは、動的データに対するマルチホップ検索においては、強力なクエリ時のオーケストレーションを備えたグラフフリーの索引付けが、知識グラフの維持オーバーヘッドに対してより効率的な代替手段を提供すると結論づけている。