扎克伯格把安全这道题换掉了:不是把一个模型对齐好,而是把权力铺开

2026-08-12 · AI安全 · 开源 · 超级智能 · 治理 · 对齐
把安全从「模型内部有没有对齐好」重新定义为「权力怎么分布」,这个问题提得成立;但支撑它的交付物目前只是一个从闭源旗舰蒸馏出来的 30B 模型。

先说结论

8 月 10 日扎克伯格那封 6500 词长信,被大部分报道读成「开源 vs 闭源」又一轮口水,漏掉了真正硬的那句:他说,去工程化出一个善意的超级智能本身就是错的目标——人和人的价值排序差得太远,不存在一个系统能同时服务所有人。

这不是站队,是宣布对齐这道题的题面写错了。行业默认的安全路径是「把模型内部调对」——RLHF、宪法式训练、拒答策略,全建立在「存在一个足够好的目标函数」这一前提上。他直接说前提不成立,把安全的落点换成权力分布:三原则原话是「以个体赋能作为繁荣之源,以发明作为超级智能的首要目的,以权力制衡作为安全的基础」。

题面换了,评价标准就换了。这才是真正的变量。

事情是怎么发生的

信题《The Future is for Everyone》,8 月 10 日发在 Meta 官网,同日落地两件事:开源 30B 的 Muse Glimmer(Apache 2.0),和一个 10 亿美元社区基金。他同时宣布 Meta 董事会将有权审查模型发布是否符合董事会批准的安全标准,并呼吁全行业照做。

最出圈的是那个律师类比:如果只有一个人拥有超级智能律师,他在法庭上就会拿到不公平的优势——哪怕他在实体上是错的;但如果每个人都有一个,司法反而比今天更公平高效,因为诉讼里本就存在技能和资源失衡。同一套逻辑他推到了网络安全和商业。

放在时间线里更有意思。三天前,OpenAI 说无法排除未发布的 Astra 触及其 Preparedness Framework 的「Critical」级网络安全能力,暂停部分内部活动,加装隔离测试环境、沙箱执行和权重加密——闸门画在能力等级上。扎克伯格整个论证反过来:闸门不在能力,而在谁拿到——只有一个人拿到才危险,所有人拿到就安全。同一周,两家前沿实验室给出两套互斥的安全理论。

为什么重要

两套理论对产业的要求完全不同。按能力设闸门,要建评测、红队、分级授权这套「先测量再放行」的设施,慢且贵,但能做实验;按分布设闸门,要建的是分发能力、终端设备和可微调权重,更快也更合商业胃口,代价是把验证推到社会层面——而那里没有对照组,没法做「所有人都有超级智能」的 A/B 测试。

第二重后果更直接:如果「单一善意超级智能」真是错的目标,大量对齐研究隐含的单一奖励函数假设就得改写,价值多元、可分叉的偏好建模、群体目标冲突会从边缘变成主线。这是工程转向,不是口号。

站得住与站不住的地方

站得住的:价值多元这个诊断是对的。单一目标函数在跨文化、跨阶层的价值冲突面前必然露缝,这不算新发现,但由一家前沿实验室的一号位公开承认目标可能设错,分量不一样。权力集中也确实是被对齐讨论挤到边上的真风险。

站不住的,第一条最硬:同日开源的 Muse Glimmer 是 30B 稠密模型,且从 Muse Spark 1.2 蒸馏而来——那个闭源旗舰 8 月 5 日刚发布,权重只停在「近期计划开源」的口头承诺上。宣言讲的是把最强能力交给每个人,交付物是最强模型的一个蒸馏子集;Forbes 转述用的词还是「恢复」开源发布,恢复本身就意味着顶层停过。这道缝比哲学层面的反驳好核查得多。

第二条:律师类比默认了攻防对称。诉讼和市场里大致成立——双方都变强,制度吸收得住;但生物、网络这类攻防成本严重不对称的领域,假设直接崩掉:一次成功的攻击不需要对手同样强,只要防守方漏一个口子。

第三条,Goertzel 说得最准:使用者之间的权力平衡,和对系统本身的权力,是两回事。训练、微调、定价、下架仍在 Meta 手里,用户拿到的是使用权不是控制权。他的原话是:这仍是「同一个围墙花园,只是里面装了个大得多的脑子」。另外,那个批准发布标准的董事会,是 Meta 自己的董事会。

接下来该盯什么

一、前沿层权重会不会真开。判据是 Muse Spark 1.2 的权重是否公开发布,而不是又一个蒸馏版。开源始终停在旗舰下面一档,「交给每个人」就只是把蒸馏品交给每个人。

二、董事会的构成和否决权。成员是谁、是否独立于管理层、标准是否公开、有没有真实否决过并披露。没有这些,和内部合规评审没区别。

三、「价值多元」能不能被操作化。会不会出现可测的东西——多目标偏好模型、可分叉的价值配置、群体冲突评测集,还是一年后原样复述。

看点是这场对照实验本身:一边把安全押在测量能力上,一边押在铺开分发上。两边都还没拿出证据,却都已按各自的理论投钱建产线。