核心要点速览

  • 前OpenAI的Will Depue宣布,已从公开权重中还原出训练GPU的指纹
  • 包括DeepSeek在内,四家公司的6个模型与禁运对象Blackwell的初始化一致
  • 最大规模估计为2000至3000块,OpenAI与Anthropic的研究人员已进行验证

留在公开权重中的训练GPU指纹

曾在OpenAI参与Sora与o3开发的Will Depue(@willdepue)于2026年11月12日发布了Unemployment Labs的报告,该帖浏览量已超过657万。其主张的核心是:模型最初放置时的权重排列,由GPU与随机数种子的组合唯一确定,这一痕迹会留在公开权重中。

他强调,这并非内部举报或泄露资料,而是对各公司自行发布的权重所作的解析。他比对了超过6万亿种芯片配置与种子的组合,结论是:包括DeepSeek-V4-Pro、Kimi K3、MiniMax-M3在内的6个模型与Blackwell初始化一致。

在实机上逐比特吻合的DeepSeek与Kimi

在未经改动的PyTorch上运行还原出的种子后,Blackwell B300逐比特复现了DeepSeek-V4-Flash尚未更新的初始权重。借来的GB200以相关系数0.999995复现了Kimi K3;在Hopper H100上则无法吻合,将种子偏移1后,吻合也随之瓦解。

所在、入手途径与禁运违规均未得到证明

根据发布日程与模型规模估计,规模最大的Kimi K3与DeepSeek-V4-Pro各自使用了2000至3000块Blackwell。单个集群的采购费用约为1.5亿至2亿美元;相关实验室合计的出口管制对象GPU超过5亿美元,若计入实验用途,规模也可能达到数十亿美元。

报告明确指出,指纹说明的是权重的生成方式,并不能证明训练本体也由Blackwell承担。特殊设定的AMD已在DeepSeek-V4-Flash上被排除;所在地、入手途径以及是否存在禁运违规,均尚未确立。据称,OpenAI与Anthropic的资深研究人员已进行独立验证。

残留在中国AI新模型中的Blackwell指纹:原站入口在新标签页查看原始页面的完整内容
打开《中国AI的Blackwell训练》官方页面及相关链接 ↗

X(推特)首发原帖

可在 X 上直接查看创作者发布的原帖与互动详情。

常见问题

指纹吻合是否意味着违反出口管制

报告将其视为表明能够获取先进计算资源的技术证据,同时明确说明:芯片所在地、入手途径以及是否违反出口管制,均尚未确立。训练本体由Blackwell承担这一点,同样未得到证明。全文见http://unemploymentlabs.com/checkpoint-forensics。

参考链接与官方出处

  1. 中国AIのBlackwell訓練 関連ソース (1)x.com
  2. 中国AIのBlackwell訓練 関連ソース (2)unemploymentlabs.com
  3. 中国AIのBlackwell訓練 公式・公開ページunemploymentlabs.com