Une étude d'ablation préenregistrée sur un wiki markdown de 709 pages maintenu par un LLM teste si la divulgation progressive—utilisant un catalogue compact et des résumés d'une ligne au lieu d'un index monolithique—réduit les coûts tout en maintenant la qualité des réponses. L'expérience compare quatre versions du corpus sur trois conditions d'accès : un agent contraint par le protocole, un agent de routage autonome libre et un régime de préchargement de catalogue.
- Un pilote a révélé que les agents capables d'utiliser des outils contournent souvent entièrement l'index, déduisant directement les chemins de page à partir des questions.
- La qualité des réponses dans le bras de récupération n'était pas inférieure à la ligne de base de l'index dans la marge préenregistrée.
- Les coûts ont considérablement diminué dans tous les régimes : d'environ un tiers pour l'agent de routage autonome et bien plus de la moitié sous préchargement de catalogue.
- Ces économies résultent d'un accès plus ciblé, le bras de récupération citant moins de pages et nécessitant moins de tours d'outils.
L'étude démontre que la divulgation progressive peut réduire les coûts sans sacrifier la qualité, tout en servant également d'étude de cas sur la validité de l'évaluation grâce à une discipline stricte face aux menaces à la validité.