Les auteurs proposent un cadre où les métriques d'évaluation et les compétences de l'agent coévoluent pour permettre l'auto-amélioration en l'absence de métriques préexistantes fiables. Cette approche utilise un cycle de vie évolutif pour rechercher des compositions de petits détecteurs de défauts, créant ainsi une métrique transparente et inspectable qui est cohérente avec des ensembles de référence ancrés.
- La boucle de métrique est entraînée pour être cohérente avec un ensemble de référence ancré de dix éléments et régulée par consensus sur les sorties non étiquetées.
- Double Ratchet fait coévoluer la métrique avec une boucle de compétence gérée par le cycle de vie à travers la génération de code (MBPP+), la conversion texte-SQL pour entreprise (Spider~2.0-Snow) et la génération de rapports.
- Le système conserve 88--110% du gain obtenu sur l'ensemble de test laissé de côté, réalisé par les boucles de compétence pilotées par la vérité terrain ou la meilleure grille disponible.
- La sécurité est maintenue grâce à la discipline d'ancrage et aux audits externes, un juge indépendant capturant les grilles contournées dans les tâches de génération de rapports.
Les auteurs soutiennent que cette architecture anticipant les échecs constitue le bon choix par défaut pour les applications où aucun vérificateur automatique fiable n'existe.