Les chercheurs présentent FinPersona-Bench, un benchmark de simulation conçu pour mesurer la décroissance de la saillance du mandat (MSD), le phénomène par lequel les mandats comportementaux des agents financiers autonomes perdent leur influence sur de longues périodes de déploiement. Le benchmark utilise un marché synthétique qui découple le prix de la valeur fondamentale pour évaluer trois modes d'échec : trader sans signal, vendre en panique lors des krachs et ignorer la valeur pendant les bulles.
- Les évaluations de 18 LLM de pointe et open-source montrent que le MSD s'aggrave avec le temps et varie selon le modèle.
- Dans les scénarios de krach, l'écart comportemental entre les agents statiques et ceux recevant un ancrage périodique du mandat augmente de 4,4 fois du premier au dernier trimestre.
- L'ancrage du mandat aide les agents conservateurs dans les marchés à faible signal mais aggrave le comportement des agents agressifs dans le même contexte.
Ces résultats suggèrent qu'un déploiement fiable sur le long terme nécessite un ancrage sélectif et conscient du mandat, basé sur le profil de l'agent et le régime du marché.