Исследователи предлагают уровень сущности в выявлении членства для определения того, было ли в процессе обучения LLM вынуждено обрабатывать информацию о реальной сущности. С помощью построения запросов с ограниченными подсказками по сущности и анализа семантических признаков в полученных ответах, их пять стратегий интервью достигают до 0,97 AUC и улучшают сбалансированную точность на 6,0%–17,5% по сравнению с адаптированными базовыми моделями на сущностях человека.
Уровень сущности в выявлении членства через интервью с LLM
Переведено с English → Русский