ある研究は、異なる形式の概念的グラウンディングが、4つの最先端の大規模言語モデルにわたって反ユダヤ主義の検出と説明行動にどのように影響するかを調査している。2つの専門家注釈付きデータセットを用いて、研究者たちは反ユダヤ主義の定義的表現、きめ細かい分類学的表現、例augmented表現、および大規模文脈表現を比較した。

  • きめ細かい分類学的表現は、精度を同時に低下させながら、想起を大幅に向上させる。
  • 大幅に大きな概念的リソースを提供しても、追加の量的利益は得られない。
  • ホロコースト後の反ユダヤ主義は、モデルと構成全体で最も持続的な課題を示す。
  • 分析により、概念的参照の過剰生成、Lexicalシグナルへの依存、過信、および微妙または正当化された形式の反ユダヤ主義に対する困難さを含む体系的な限界が明らかになった。

これらの知見は、反ユダヤ主義の検出と推論における概念的グラウンディングされたLLMの可能性と残存する限界の両方を浮き彫りにしている。