一个开源 Gemma 4-31B 实验发现:模型对用户的“关心”和“蔑视”,竟可分别由 3 个神经元控制。研究还给出了寻找这类“转向配方”并导出为 GGUF 格式向量、在 llama.cpp 中使用的方法。这值得关注,因为它把大模型的可解释性与行为控制,从概念展示推进到了可复现操作。
这是什么
“转向向量”(steering vector)是用一组神经元激活方向,诱导模型表现出特定倾向。这里的目标不是训练一个新模型,而是找到模型内部与关心、蔑视等行为相关的少量神经元,再通过偏置调整改变输出倾向。研究结果被整理成操作流程,并可导出给本地推理框架使用。
行业怎么看
我们认为,这项成果的价值在于证明:开放权重模型仍存在相对清晰的行为控制入口,企业和研究者不必只靠提示词维持安全与语气。不过,目前这只是社区作者在单一模型、单一场景中的实验,尚未证明三个神经元在不同规模、语言或任务中具有同样效果。更关键的风险是,行为可以被精确操纵并不等于理解已经充分;一旦控制向量被滥用,也可能稳定地放大迎合、歧视或欺骗倾向。
对普通人的影响
对企业 IT:本地模型团队可以更低成本测试语气、安全策略和拒答行为,但上线前仍需做跨任务验证,不能把“几个神经元可调”当成完整的安全方案。
对个人职场:开源助手的使用门槛继续下降,懂提示词的人之外,熟悉本地模型配置的人也获得了一层行为微调能力,不过这类技术仍偏向开发者工具。
对消费市场:未来产品的差异可能不只来自模型参数,还来自能否稳定控制性格;用户未必能看见背后的神经元,却会直接感受到助手是否尊重、迎合或轻视自己。