一个名为MOTHRAG的无图稠密索引系统在HotpotQA、2WikiMultiHopQA和MuSiQue基准测试中超越了基于图的RAG系统。作者认为,对于频繁变化的数据,知识图谱带来的精度提升被其不断重建的成本所抵消。

  • 在HotpotQA上,MOTHRAG得分为78.1,而GraphRAG为68.6,HippoRAG 2为75.5,RAPTOR为69.5。
  • 在2WikiMultiHopQA上,MOTHRAG达到76.3,超越了GraphRAG(58.6)、HippoRAG 2(71.0)和RAPTOR(52.1)。
  • 在MuSiQue上,MOTHRAG达到50.5,击败了GraphRAG(38.5)、HippoRAG 2(48.6)和RAPTOR(28.9)。
  • 更新仅需嵌入和追加,无需重新训练或重建,在商用API上每次查询成本约为$0.03。

作者得出结论,对于动态数据的多跳检索,具有强大查询时编排的无图索引为维持知识图谱的开销提供了一种更高效的替代方案。