L'étude présente URSA (Utilitarian RetroSynthesis Assessment), un cadre d'évaluation conçu pour comparer les voies de synthèse sous des angles formels et de plausibilité chimique. Ce protocole répond à la difficulté de la comparaison objective dans la découverte de médicaments en imitant la manière dont les chimistes experts évaluent les réactions.
- Le cadre évalue la convergence vers des matières premières commercialement disponibles ainsi que la plausibilité chimique.
- Il évalue les solutions conventionnelles de rétrosynthèse de bout en bout et les grands modèles de langage sur des molécules cibles nouvelles et diverses avec des voies de synthèse non divulguées.
- Les LLM sont capables de soutenir la planification stratégique de haut niveau mais sous-performent les modèles spécialisés de rétrosynthèse dans la résolution fiable des tâches de planification de synthèse.