Jeanbosange 发布了 LIMEN Runtime Audit 的首个公开原型,这是一个开源工具包,旨在检查开放权重语言模型中的逐层激活轨迹。该工具将跨层的隐藏状态序列视为可测量的轨迹,为比较内部运行时行为提供了可复现的可观测层。

  • 版本 0.1 接受包含隐藏状态和可选 logits 的导出 NumPy 数组。
  • 它计算包括路径长度、位移、曲折度、平均速度、速度变异性、平均加速度、转弯角度、熵以及 top-1/top-2 边距在内的指标。
  • 该工具包验证数组维度,记录提取元数据,生成 SHA-256 校验和,并输出机器可读的 JSON 和 Markdown 审计报告。
  • 它在 Python 3.10、3.11 和 3.12 上运行自动化测试。

作者强调,这是一个描述性审计工具,而非推理或语义状态的预测器,旨在帮助用户比较模型架构、检测回归问题,并研究不同提示家族之间的动态差异。