PraMem — это новый подход к прогнозированию поведения на длительных горизонтах, который устраняет ограничения больших языковых моделей в выявлении скрытых поведенческих паттернов и преодолении когнитивных искажений. Вместо сжатия исторических данных он проводит предварительную практику на длинных последовательностях, формируя опытную память, используемую как вспомогательный ввод.
- Переосмысливает исторические последовательности из бремени в ценный ресурс для использования.
- Формирует опытную память посредством предварительной практики на исторической последовательности.
- Использует эту память в качестве вспомогательного ввода для повышения точности прогнозирования.
- Демонстрирует превосходные результаты по сравнению с предыдущими методами в разнообразных задачах.
Авторы считают это значимым, поскольку подход решает ключевые проблемы долгосрочного прогнозирования за счёт использования истории, а не просто снижения её нагрузки.