MOTHRAG bat GraphRAG, HippoRAG 2 et RAPTOR sur les benchmarks multi-sauts

Un système d'index dense sans graphe nommé MOTHRAG a surpassé les systèmes RAG basés sur des graphes sur les benchmarks HotpotQA, 2WikiMultiHopQA et MuSiQue. Les auteurs soutiennent que pour les données fréquemment changeantes, les gains de précision apportés par les graphes de connaissances sont annulés par le coût constant de leur reconstruction.

• Sur HotpotQA, MOTHRAG a obtenu 78.1 contre 68.6 pour GraphRAG, 75.5 pour HippoRAG 2 et 69.5 pour RAPTOR.
• Sur 2WikiMultiHopQA, MOTHRAG a atteint 76.3, dépassant GraphRAG (58.6), HippoRAG 2 (71.0) et RAPTOR (52.1).
• Sur MuSiQue, MOTHRAG a atteint 50.5, battant GraphRAG (38.5), HippoRAG 2 (48.6) et RAPTOR (28.9).
• Les mises à jour nécessitent uniquement l'embedding et l'ajout sans réentraînement ni reconstruction, coûtant environ 0,03 $ par requête sur les API grand public.

Les auteurs concluent que pour la récupération multi-sauts sur des données dynamiques, l'indexation sans graphe avec une orchestration forte au moment de la requête offre une alternative plus efficace à la surcharge de maintenance des graphes de connaissances.