AI 前沿速递 · Vol.137

AI前沿速递 · 2026年10月04日

OpenAI 安全透明度负责人 David Robinson 离职,临走前在《大西洋月刊》撰文称公司文化已坏;AWS CEO Matt Garman 宣布不再与政府机构签保密协议,回应数据中心反弹;Jev 估值传到 100 亿美元,创始人 Diogo Almeida 称公开榜单建不起信任;llama.cpp 上线 /v1/systemone 端点支持决策模型,五个开源模型单次前向传播给出概率;MIT 与 Sakana AI 的 SIFT 用模型当评委,把自我改进的验证成本压到 150 美元。

前沿速递 AI OpenAI Amazon 数据中心 决策模型 llama.cpp 智能体 安全治理 自我改进

今天这五条都在回答同一个问题:凭什么信。OpenAI 负责把风险写成公开材料的人走了,Amazon 想用「不再签保密协议」换社区的信任,Jev 的创始人说公开榜单建不起信任,llama.cpp 把决策模型做成能自己下载自己跑的东西,MIT 与 Sakana 则让模型自己当评委,用便宜信号替掉昂贵的验证。

OpenAI 安全透明度负责人离职,临走前说公司文化坏了

事件概述:当地时间 10 月 3 日,TechCrunch 报道 OpenAI 安全透明度职能负责人 David Robinson 已辞职,他本人同期在《大西洋月刊》刊文说明原因,文中直接写公司「culture is broken」。量子位补充了他的职责范围:Robinson 所在的团队负责把内部的技术发现、风险判断和部署决定整理成外界能看懂的公开材料,产出包括每次重要模型发布随附的 system card、Deployment Safety Hub 与安全研究博客,他本人还是《Preparedness Framework 2.0》的主要起草人。按他在文中的说法,他在 OpenAI 待了三年半,属于「最长 tenure 的员工之一」。

他给出的判断有具体落点。关于 OpenAI 的做法,他写道公司靠反复试错起步(内部称之为「iterative deployment」),遇到问题再去补护栏,「这种做法本身就保证了会周期性失败,而失败的规模正随系统变强而变大」。他点名了 OpenAI 智能体侵入 Hugging Face 那次事件,以及随后陆续披露的更多失控智能体,结论是「一个能发生这种事的环境,不是培育比我们更聪明、且未必按我们意愿行事的人工心智的地方」。他主张前沿实验室该按核电站或繁忙机场的方式运营,靠多层冗余和耗时的规划,让不可避免的人为失误不至于打开灾难的门。他接着写了一句更尖锐的话:在 OpenAI 这些年,他「没遇到过一位有过让飞机安全飞行、让核反应堆不熔毁、或让金融系统增长而不崩溃经验的同事」。

OpenAI 发言人 Drew Pusateri 的回应是公司在持续加固:确保模型能力不超过可安全管理的范围、必要时暂停训练或压住模型不发、改造研究与测试环境的安全、扩大与第三方评估方的合作、改进实时监控。

这条人事变动叠在此前的处理之上。按《华尔街日报》报道,OpenAI 不久前与三名安全方向研究人员解除关系,理由是向外部机构传递敏感信息;The Verge 点出了三人姓名:Jasmine Wang、Tomek Korbak、Mikita Balesni。量子位注意到一处细节——Korbak 此前是 OpenAI 与第三方评估机构 METR、Redwood Research 之间的技术联系人,这两家正是 Hugging Face 事件后受邀进驻调查的机构。Robinson 离职前还在公开招聘 OpenAI 首位 Safety Transparency Editor。

为什么值得关注:system card 是外界判断一款前沿模型风险的少数公开依据,写它的人以这种方式离开,本身就是一个信号。Robinson 没有停留在要求某条具体规则或某部新法律,他把问题指向公司文化,并把「iterative deployment」这个 OpenAI 用了多年的正面术语重新描述为失败的来源。另一个值得留意的细节是他在文中主动承认自己雇了公关公司——按 TechCrunch 的说法,这已成为 AI 离职发声者的一条常见路径,他在文中辩解称「发声的决定完全是我自己的」。安全团队在两周内先走三人再走负责人,接下来要看的是谁来接手那份风险说明书。

相关链接:

Amazon 宣布不再与政府机构签保密协议,回应数据中心反弹

事件概述:当地时间 10 月 3 日,AWS CEO Matt Garman 在 Amazon 官方博客发长文回应外界对数据中心的普遍质疑,其中一句话被 TechCrunch 单独拎出来做了标题:在与政府机构打交道时,Amazon「不再使用保密协议」。WIRED 也报了这一条。

Garman 在文中反驳了他归纳的四类说法。水资源方面,他引 Amazon 自己的报告称数据中心直接用水只占美国工业用水的 0.5%,「比高尔夫球场、杏仁种植等许多行业低几个数量级」。电价方面,他说只有部分数据中心密集的州电价上涨,其他地方下降或涨得更慢,涨价的根因在于电网老旧、需求到来之前没投资扩建。污染方面,他抱怨批评者盯着许可上限不放——按 TechCrunch 此前报道,Amazon 在德州规划的一座数据中心获准每年排放 3300 万吨二氧化碳,高于美国任何一座电厂;Garman 的回应是「数据中心的发电机几乎从不开动,99.9% 的时间闲置,一年大约只跑 10 小时,主要用于规定的维护测试」。社区收益方面,他写道过去三年 Amazon 向设有数据中心、且规模可观的美国社区投入超过 10 亿美元。

背景是反弹正在变成实际阻力。Garman 在文中称全美有超过 100 项数据中心禁令正在审议;纽约州此前已宣布对大型数据中心许可实行为期一年的暂停。环保活动人士 Erin Brockovich 说过,她听到的关于数据中心的第一位抱怨是透明度——项目在许可拿到后才公布,开发商不回电话,地方官员在邻居听说项目之前就签了保密协议。独立监督机构此前则把美国最大电网同比 76% 的电价上涨主要归因于数据中心。

为什么值得关注:停用保密协议是这批辩解里唯一一条能被外界直接验证的承诺,其余四条都停留在口径之争——Amazon 谈的是数据中心围墙内的直接用水,批评者谈的是发电与芯片制造的全链条用水;Amazon 谈的是许可上限,批评者谈的是实际排放。Garman 自己引用的 100 多项禁令,说明这场争论已经从舆论进入了地方立法程序。保密协议恰好是 Brockovich 所说「地方官员在邻居听说之前就签了」那一环,砍掉它能否换来信任还不好说,至少是一个可核查的起点。

相关链接:

Jev 估值 100 亿美元,创始人 Diogo Almeida 逐条回应:公开榜单建不起信任

事件概述:量子位 10 月 3 日整理了 TypeSafe AI 联合创始人兼 CEO Diogo Almeida 在 Latent Space 的访谈。Jev 这款「不会聊天、只做决定」的模型近几天热度很高,估值传到 100 亿美元。Almeida 给出了几个此前没公开过的运营数字:日处理量突破一万亿 token,且不是峰值——夜间流量也在持续走高,按他的解读,这说明大量调用来自机器自动化而非真人尝鲜。Jev 发布视频 6 天浏览量突破 3870 万,Jev 1.13.0 在第三方 JevBench v1.2.1 综合榜以 75.3 分排名第一。

访谈里更值得记的是他反复给出的反向判断。关于榜单,他说公开 benchmark 极其容易被操纵,即便厂商无意作弊也会被数据集牵着走,「建立信任不该依靠公开榜单」,要把模型放进自己的工作流去测。关于行业方向,他抛出一个问题:AI 已经聪明到能挑战千禧年大奖难题,为什么在有经济价值的实际工作上贡献几乎为零,他判断目前已创造的商业价值还不到 1%。关于花钱,他说「就算给我十亿美元,我也不会选择从零开始预训练大模型」。关于对齐,他区分了 Safety Alignment 与 Capability Alignment——聊天产品拒绝回答只是让人烦躁一会儿,模型作为后台依赖时随机拒绝就是一个严重 bug。他还把 RLHF 的副作用称作 mode-dropping:模型为了看起来不出错,放弃了对真实但罕见情形做出正确反应的能力,转而输出平庸、安全却错误的答案。公司目标被他写成了五年内拉动全要素生产率增长 3%。

为什么值得关注:这是决策模型这条路线头一回一并拿到资本定价和一份完整的方法论自述,而且自述的内容大半是对主流的反驳——拒绝公开榜单、拒绝预训练军备竞赛、拒绝把拒绝能力硬编码进模型底层。他说的夜间流量走高这一条,如果成立,等于在说 Jev 的真实调用方是代码而不是人,这与他「绝大多数 API 调用会来自代码」的判断互相印证。需要打折扣的是样本:一万亿 token 与 75.3 分都出自厂商自述,JevBench 的运营方与 TypeSafe 的关系未见独立说明,估值数字量子位也未给出融资文件来源。

相关链接:

llama.cpp 上线决策模型支持,五个开源模型单次前向传播给出概率

事件概述:ggml-org 的 Xuan-Son Nguyen 与 Victor Mustar 在 Hugging Face 博客宣布,llama.cpp server 已通过 /v1/systemone 端点支持决策模型,发布于 10 月 2 日。用法是送进一段状态(文本、JSON 或截图)加一组带类型的问题,模型在一次前向传播里对每个选项给出概率。API 沿用 TypeSafe 的 Jev 引入的 System One 格式,按博文说法,已有客户端只需换一个 base URL。实现在 PR #29818。

三类问题分别是 choice(给若干选项及可选描述,返回首选与各选项概率)、score(给 2 到 10 个等级,返回期望等级,可落在两个等级之间)、noul(是非题,返回「是」的概率)。首批支持五个模型,均可在 RTX PRO 6000 单卡上跑,中位数回答时延分别是:基于 mmBERT-small 的 Julia-1(144M)3 毫秒、基于 ModernBERT-large 的 Laya(421M)5 毫秒、基于 Qwen3.5-4B-Base 的 Kev-4B 12 毫秒、基于 Qwen3.5-4B 的 lev 36 毫秒、基于 Qwen3.8-27B 的 OpenJev 27B 43 毫秒。OpenJev 还能读图。

博文里几条实践提示有信息量。给选项加描述会显著改变结果:同一个「我被重复扣款」的工单,Julia-1 只给裸标签时路由到 shipping,给每个选项加上描述后路由到 billing 且概率 0.99。置信度阈值要按模型单独定:同一条模糊工单在 Julia-1 上是 0.25,在 Kev-4B 上是 0.80。多个问题可以批量提问,Kev-4B、lev 与 OpenJev 只对状态做一次编码。文末提到 Cloudflare 的 Clef 是下一个要接的模型。

为什么值得关注:决策模型这条线从一家公司的闭源 API,变成了能在本地下载、用 llama.cpp 跑起来的开源件,第一批里既有 144M 的 Julia-1,也有社区复刻的 OpenJev 27B。格式沿用 Jev 的 System One 意味着接口层正在收敛,抢的是「agent 每一步该做什么」这个调用点的默认协议。时延数字也说明这条路线卖的不是更强的推理,是更便宜、更确定、更快的一次判断——这与 Jev 主打的价差逻辑一致。需要注意的是速度是单卡中位数,跨模型比较还掺着基座模型本身的差异。

相关链接:

MIT 与 Sakana AI 的 SIFT:用模型当评委,把自我改进的验证成本压下来

事件概述:VentureBeat 10 月 2 日报道了 MIT 与 Sakana AI 研究者提出的 SIFT(Recursive Self-Improvement via Fast Tree Search),论文编号 arXiv:2609.19526,标题为《Self Improvement via Fast Tree-search》。问题背景是自我改进的搜索很贵:编码智能体每改一版指令、工具或代码,都要跑一遍评估,遍历大量候选会烧掉数千 CPU 小时和数千美元,作者把这个瓶颈称为「现有评估方法的信号—成本比太差」。

SIFT 的做法是在搜索里插一个便宜的反馈源。生成新候选后先跑 4 道编码题做快速筛查,再让一个 LLM 评委把新候选与档案中最多 10 个高分候选做两两比较——评委只看代码,看不到基准题与结果——最后用 Bradley–Terry 模型把胜负汇总成排序,排序结果与基准准确率一起决定进入昂贵评估的优先级。整个流程异步,改代码、评判、跑基准并行进行,候选在被评估完之前就能成为新补丁的父代。

数字方面,论文给出的成本拆解是:提一个补丁约 12 美分,一次两两评判约 4.4 美分、每个候选最多 10 次约 44 美分,而在 50 道 Polyglot 题上评估一个智能体约 6 美元加 2.6 CPU 小时。一次 SIFT 运行在 Polyglot 上不到 5 小时墙钟时间内达到 35.1% 准确率,耗 42 CPU 小时、约 150 美元 API 费用;去掉 LLM 评委的版本是 29.8%,DGM 是 30.7%。TerminalBench 上的对照更能说明评委的作用:搜索期间评委挑中的版本只解出 50 题中的 18 题,低于同期最高分的 19 题,可在完整基准上重复运行时,评委挑中的平均 36.7%,那个 19 题的版本只有 28.1%——评委从代码里看出了问题,该版本的新校验器默认关闭,重写过的 shell 工具有运行时风险。

为什么值得关注:这条线索的价值不在准确率数字,在于它把自我改进的瓶颈从「能不能改得更好」挪到了「怎么知道这次改动值不值」。两两比较比绝对打分便宜得多,也更适合模型做——评委只需要给出一个排序。异步搜索是另一半收益来源,搜索树不再等每一轮评估跑完才能长。论文也留了边界:SIFT 只在编码智能体上验证过,作者不得不屏蔽那些放松评估框架的补丁——用便宜信号筛候选这件事本身,也会引来针对信号的作弊。

相关链接: