Mistral AI 的万亿标尺

跨过万亿参数门槛,已不再是美国实验室或中国巨头的专利。随着绰号为 "Le Chonk" 的 Mistral Large 4 发布预览版,这家法国公司推出了迄今规模最大的模型:总参数量达 1.05 万亿的多模态 Mixture-of-Experts 架构。根据 Mistral AI 的官方文档,该模型每个 token 激活 520 亿参数(也有媒体称为 490 亿),并配备 16 亿参数的视觉编码器,上下文窗口为一百万 token。这是首个以开放权重为承诺发布的同等规模欧洲架构。据 The Next Web 报道,这也是 Mistral 在 9 月完成 30 亿欧元融资后推出的第一款模型。

不过目前,只能通过 Mistral Studio 上的公开预览版 API 访问,该服务运行在公司的欧洲数据中心。Mistral 在官方博客中写道:"We will release the weights by the end of the month";The Next Web 给出的预计日期是 10 月 27 日。许可证则尚未公布,因此还不清楚是否会沿用前代 Mistral Large 3 的 Apache 2.0 协议。价格方面,官方定价为每百万输入 token 1.36 美元、每百万输出 token 4.18 美元,目前享有五折优惠,但优惠何时结束尚不清楚。

公司的宣传重点集中在网络安全和编程能力上。根据 Mistral 公布的数据(公司自己说明这些数据是初步的,可能会变,因为强化学习阶段仍在进行),在一项漏洞复现与修补测试中,Large 4 的得分为 82%,而 Claude Opus 5.5 和 GPT-6 Astra 据称因拒绝执行任务而得分接近零:这是公司提供的数据,未经第三方验证。在 Surge AI 进行的编程盲评中,Mistral 称 Large 4 得分 3.74(满分 5 分),在五个模型中排名第二,仅次于 Claude Opus 5(4.22)。Mistral AI 的联合创始人兼首席科学家表示:"cyber defense capabilities will enable enterprises and governments to defend themselves",并预告将推出面向专业人员和政府机构、审核限制较少的版本。然而,在缺乏外部独立验证的情况下,对这些数据仍需保持一贯的方法论审慎。

据 Mistral 介绍,该模型在其欧洲数据中心的 3,800 块 NVIDIA Grace Blackwell GPU 上从零开始训练;The Next Web 则称使用了约 4,000 块 GPU,训练约两个月,功率约 10 兆瓦。这套基础设施支撑着模型的本地化(训练覆盖 160 多种语言),以及未来完全在欧盟境内托管部署的选项。在介绍这一转折时,Mistral AI 的 CEO 为欧洲争取战略空间,表示:"So the narrative that Europe cannot compete is something that is not true"。

技术主权同样要看承诺开放的权重到底有多透明。很多事情取决于两个尚未落定的问题:权重是否真正发布,以及随之而来、目前尚未公布的许可证。到那时,才能衡量欧洲的第一个万亿究竟有多开放。 — Olya