作者提出了 AI Textbook Auditor,这是一个模块化多智能体管道,旨在为教育教科书提供自动化质量保证。该系统处理教科书 PDF 以生成结构化报告,通过两条并行轨道:一个事实与技术轨道,使用专门的 LLM 智能体检测不准确之处;以及一个语法轨道,保留变音符号编码。
- 法官智能体在将发现呈现给人类审查者之前,使用领域特定规则过滤假阳性。
- 该管道支持原生视觉页面渲染和用于摄入的 PyMuPDF 文本提取。
- 在对罗马尼亚高中教科书的测试中,该系统在计算机科学教科书中发现了 56 个技术发现,专家验证精度为 62.5%。
- 它还检测到了历史和社会科学教科书中的 72 个发现,涵盖事实错误、意识形态偏见和语法。
该系统作为分诊工具,用于减少定位候选问题的人工工作量,尽管在任何编辑行动之前仍需人类专家验证。