作者分享了关于在特定上下文中基于激活路径来映射和引导本地模型的观察。文章强调了不同模型在回答一组批量提示时,其激活路径的方差差异。
- Gemma 4 31b qat 显示出最小的激活路径方差。
- Gemma 4 26b qat 表现出极端的方差。
- Qwen 3.6 35b q_4 在激活路径照明方面展示了中等的方差。
作者将这些激活路径与人类思维中的神经簇进行比较,暗示了识别和操纵模型内特定反应性特征的潜力。
作者分享了关于在特定上下文中基于激活路径来映射和引导本地模型的观察。文章强调了不同模型在回答一组批量提示时,其激活路径的方差差异。
作者将这些激活路径与人类思维中的神经簇进行比较,暗示了识别和操纵模型内特定反应性特征的潜力。