Исследование оценивает устойчивость и переносимость между языками валидированного протокола для тематической и тональной классификации открытой обратной связи по оценке обучения.

  • Исследователи повторно применили протокол к исходным испанским данным, используя три подхода генерации представлений: разреженные лексические признаки, замороженные эмбеддинги трансформеров и большие языковые модели с промптами.
  • Задачу определения тональности они перенесли на английский язык, используя сбалансированный корпус из 45 000 комментариев, проверенных по аннотированному образовательному датасету.
  • Модель уровня frontier 2026 года достигла наивысшего показателя F1 по тематике на самой сложной испанской задаче, но не показала преимущества в определении тональности по сравнению с более дешёвыми моделями.

Авторы приходят к выводу, что выбор модели — это решение для развертывания, а не свойство самого метода, поскольку протокол остаётся эффективным при использовании различных технологий представлений и языков.