MOTHRAG supera a GraphRAG, HippoRAG 2 y RAPTOR en benchmarks de múltiples saltos

Un sistema de indexación denso sin grafos llamado MOTHRAG superó a los sistemas RAG basados en grafos en los benchmarks HotpotQA, 2WikiMultiHopQA y MuSiQue. Los autores argumentan que para datos que cambian con frecuencia, las ganancias de precisión de los grafos de conocimiento son superadas por el costo constante de reconstruirlos.

• En HotpotQA, MOTHRAG obtuvo 78.1 frente a 68.6 de GraphRAG, 75.5 de HippoRAG 2 y 69.5 de RAPTOR.
• En 2WikiMultiHopQA, MOTHRAG logró 76.3, superando a GraphRAG (58.6), HippoRAG 2 (71.0) y RAPTOR (52.1).
• En MuSiQue, MOTHRAG alcanzó 50.5, venciendo a GraphRAG (38.5), HippoRAG 2 (48.6) y RAPTOR (28.9).
• Las actualizaciones requieren solo incrustación y anexión sin reentrenamiento ni reconstrucción, costando aproximadamente $0.03 por consulta en APIs comerciales.

Los autores concluyen que para la recuperación de múltiples saltos sobre datos dinámicos, la indexación sin grafos con una fuerte orquestación en el momento de la consulta ofrece una alternativa más eficiente a la sobrecarga de mantener grafos de conocimiento.