Um estudo investiga como diferentes formas de fundamentação conceitual afetam a detecção do antissemitismo e o comportamento explicativo em quatro grandes modelos de linguagem de última geração. Usando dois conjuntos de dados anotados por especialistas, os pesquisadores compararam representações definicionais, taxonômicas refinadas, aumentadas com exemplos e de grande contexto do antissemitismo.
- Representações taxonômicas refinadas melhoram substancialmente o recall enquanto simultaneamente reduzem a precision.
- Fornecer recursos conceituais substancialmente maiores não produz nenhum benefício quantitativo adicional.
- O antissemitismo pós-Holocausto apresenta o desafio mais persistente através de modelos e configurações.
- A análise revela limitações sistemáticas, incluindo superprodução de referências conceituais, dependência de sinais léxicos, excesso de confiança e dificuldades com formas sutis ou justificatórias do antissemitismo.
As descobertas destacam tanto o potencial quanto as limitações restantes dos LLMs fundamentados conceitualmente para detectar e raciocinar sobre o antissemitismo.