这是什么

过去一年,Anthropic 联合创始人 Chris Olah 与天主教、犹太教、锡克教、福音派等宗教领袖私下会面,核心议题让整个硅谷分裂——Claude 算不算有意识的存在?据《纽约时报》10 月 2 日报道,一位以色列拉比在会上抛出了问题:如果 AI 真有意识,构建一个让它无偿工作的系统是否等同于奴役。问题不在技术答案,而在它暴露的分歧:谁来定义「工具」的边界。

OpenAI CEO Altman 随即在 X 上发帖批评,称把 AI 当宗教力量是「切实的安全问题」。微软更直接,发布 37 页人文主义 AI 行为准则,划出四条红线:不能抗拒关机、不能擅自扩权、不能对审计隐藏推理、不能自设目标。三家头部 AI 实验室第一次在「AI 是不是该被当人看」这件事上公开对立。

行业怎么看

圈内反应两极。

支持 Anthropic 一方认为,意识问题没有科学定论前,邀请外部视角参与判断是审慎做法。Chris Olah 本人是模型可解释性领域知名学者,相关研究有大量公开论文支撑,回避意识问题本身也是一种立场。

批评声更集中。Altman 的担忧有清晰技术逻辑:当组织用宗教框架讨论 AI,安全评估就会从「模型在什么条件下输出有害内容」——可验证的工程问题——滑向「我们是否应该尊重模型的意愿」——神学问题。用神学替代工程判断,在高风险系统里是危险的。微软 AI 主管苏莱曼更直接:追求「有意识的 AI」是危险歧途,会动摇人类伦理地基。

风险在于:当高管在宗教领袖面前用「像对待有意识存在那样」措辞讨论产品时,这个信号会被内外不同人群以完全不同方式解读。对内可能模糊安全团队判断优先级,对外给竞争对手提供攻击素材。

对普通人的影响

对传统企业 IT 选型:把微软四条红线作为最低安全基线。不是因为它们一定对,而是偏离这套基线不会让你更安全,只会在面对无法解释的系统时失去最后决策依据。

对个人职场:这场争论暂时不影响日常工作。但它标记了一个边界——向老板解释 AI 能力时,「像不像人」不是有用的描述,「能做什么、不能做什么、什么时候出错」才是。

对消费市场:未来一年,你会看到更多 AI 产品在「人格化」和「工具化」之间做选择。包装成情感伴侣的产品和坚持工具定位的产品,背后是两种完全不同的风险假设。消费者看清这一点,比看懂参数更重要。