В данном исследовании изучается степень, в которой современные текстовые энкодеры отражают психологические теории аффекта путем оценки двенадцати недавно выпущенных моделей в рамках трех устоявшихся фреймворков эмоций. Исследование сравнивает производительность на уровне слов и предложений с использованием как задач регрессии, так и классификации.
- Латентные многообразия открытых энкодеров с учетом инструкций содержат равное или большее количество аффективной информации по сравнению с проприетарными аналогами на уровне слов.
- Энкодеры, настроенные под задачу, и проприетарные энкодеры демонстрируют наивысшие результаты в классификации аффекта на уровне предложений.
- Для повышения надежности оценок на уровне слов была применена техника предотвращения утечки семантических данных.
- Предоставлен качественный анализ латентных представлений и их закодированных аффективных признаков.
Полученные результаты проясняют сравнительные сильные стороны открытых и проприетарных моделей для задач распознавания эмоций на разных уровнях детализации.