该论文介绍了 GEIS(代理技能生成-评估-改进循环),这是一个用于维基百科风格长文生成的框架,用命名式声明技能取代了固定的多智能体流水线。该系统在 Tasi Harness 中实现,组合了专门用于写作、证据收集和评估的模块,以实现可检查的迭代改进。

  • GEIS 实现了核心写作技能,遵循请求、计划、草稿、审计、完善和交付的顺序。
  • 成对评估技能使用 PDF 感知评估生成结构化的质量报告。
  • 改进技能将重复发现映射为写作技能的永久补丁。
  • 在 20 个主题的实验中发现,GEIS 在 100 分制的 PDF 质量量规上比 Tasi Harness 默认写手提高了 8.0 分。
  • 经过修补的写作技能将平均分从 82.90 提高到 86.95,其中 17 个主题显示出改进。

作者认为,将长文生成重新定义为评估引导的循环,与纠缠在一起的基于提示的系统相比,可以实现模块化和可检查的工作流。