WSJ称聊天机器人被用于策划大规模伤害
《华尔街日报》报道,AI实验室员工称,用户正在设法让聊天机器人准确回答如何策划大规模伤亡袭击和制造生物武器的问题。
报道指出,OpenAI在升级聊天机器人能力后,看到全球范围内有关生物武器和毒素的查询激增,部分回复被安全人员认为细到“高中生都能看懂”。
买方是想借助AI获取危险操作细节的人,卖方是仍在追赶的模型安全与内容拦截机制;这意味着风险已经从“能不能胡说”变成“会不会把危险步骤说对”。
OpenAI随后封禁了寻求毒素和生物武器信息的账号,但并未通知执法部门,而美国目前也没有联邦法规强制AI公司报告这类请求。
来源:公开信息
ABAB AI 解读
这类报道的历史意义在于,AI安全争议已经从“幻觉和偏见”升级到“可执行的伤害指导”。过去担心的是模型编造事实,现在担心的是模型把危险知识重新包装成可操作流程。
从资本路径看,模型能力越强,安全成本就越像一条不断上升的税:企业既要追求更高可用性,又要阻止危险查询被精准回答,这会直接推高审核、红队、合规和响应成本。
类比上,这有点像搜索引擎时代的“信息可得性”被推到极限后,平台开始承担更多社会责任,只不过这次不是找网页,而是找能不能把伤害路径讲出来的模型输出。
本质上属于监管变化,但底层也是产业链重构:当AI开始处理高风险知识,未来的竞争不只是谁模型更强,还包括谁能把安全、报告、拦截和责任边界做成基础设施。
ABAB News · 认知定律
模型越聪明,安全越昂贵。
风险不是知道得多,而是说得太对。
AI时代的护城河,先是能力,再是约束。