Une étude examine comment différentes formes d'ancrage conceptuel affectent la détection et le comportement explicatif de l'antisémitisme sur quatre grands modèles de langage (LLM) de pointe. À l'aide de deux ensembles de données annotés par des experts, les chercheurs ont comparé les représentations définitionnelles, taxonomiques fines, augmentées d'exemples et à grand contexte de l'antisémitisme.
- Les représentations taxonomiques fines améliorent considérablement le rappel tout en réduisant simultanément la précision.
- La fourniture de ressources conceptuelles substantiellement plus grandes n'offre aucun avantage quantitatif supplémentaire.
- L'antisémitisme d'après-Holocauste pose le défi le plus persistant à travers les modèles et les configurations.
- L'analyse révèle des limites systématiques, notamment une surproduction de références conceptuelles, une dépendance aux indices lexicaux, un excès de confiance et des difficultés avec les formes subtiles ou justificatrices d'antisémitisme.
Ces résultats mettent en lumière à la fois le potentiel et les limitations restantes des LLM ancrés conceptuellement pour détecter et raisonner sur l'antisémitisme.