Les chercheurs présentent PLURAL, un jeu de données de préférence à grande échelle conçu pour aider les grands modèles de langage à refléter des valeurs mondiales diversifiées plutôt que principalement occidentales. Le jeu de données s'appuie sur l'Enquête intégrée sur les valeurs, qui couvre 92 pays, et contient environ 500 000 triplets de préférence synthétiques représentant des personnes de 20 nations diverses.
- PLURAL transforme les réponses d'enquêtes représentatives au niveau national en scénarios réalistes qui préservent les signaux de valeurs normatives.
- La validation au niveau du jeu de données confirme qu'il préserve à la fois les différences inter-pays et la diversité intra-pays de l'enquête originale.
- L'évaluation automatisée montre que l'entraînement sur PLURAL réduit l'erreur absolue moyenne dans l'alignement des profils culturels jusqu'à 27,7 % par rapport aux bases solides.
- Des évaluations humaines en aveugle avec 176 participants en Inde, au Brésil et au Japon ont jugé les réponses alignées sur PLURAL comme plus représentatives de leurs valeurs nationales.
Les auteurs considèrent cela comme important car cela offre une ressource évolutive pour l'alignement pluraliste, permettant aux modèles de mieux représenter des systèmes de valeurs diversifiés à l'échelle mondiale.