Исследователи предлагают UltraX, фреймворк уточнения вызова функций, предназначенный для устранения ограничений существующих методов обработки больших объемов данных путем объединения вставки с удалением и модификацией для тонкого редактирования на уровне экземпляров.
- Фреймворк использует адаптивную к набору данных оптимизацию промптов для направления экспертной LLM в генерации высококачественных сквозных уточненных текстов.
- Выравнивание строк и динамическая замена контекста преобразуют пары исходный-уточненный текст в структурированный программный надзор.
- Фильтрация примеров с низкой уверенностью и выборка с контролем соотношения стабилизируют распределение обучения и улучшают качество надзора.
- Скользящее окно предсказания, глобальная агрегация операций и системная постобработка обеспечивают стабильность во время вывода и выполнения.
Эксперименты демонстрируют, что UltraX достигает наивысшей средней производительности по всем корпусам, сопоставляя или превосходя базовые уровни с меньшим количеством обучающих токенов, что указывает на более высокую эффективность данных и надежность уточнения.