研究人员提出了一种通过将端到端生成的任务导向对话(TOD)建模为约束满足问题(CSP),来自动检测其中不一致性的方法。该方法解决了大语言模型中幻觉这一关键问题,即系统响应可能未严格遵守领域知识库。

  • 该流水线将TOD概念化为一个CSP,其中变量代表引用对话领域的对话片段,而约束则捕捉如轮次连贯性等属性。
  • 它识别目标对话中的变量,并应用CSP求解器寻找有效解进行比较。
  • 通过比较目标对话与有效的变量赋值来检测不一致性,从而建议进行最小更改以确保一致性。

该研究展示了这种基于CSP的方法在检测不一致性方面的高准确性,并对发现进行了详细分析。