史上最大的开放权重模型 Kimi K3，来自中国

7 月 16 日，中国初创公司 Moonshot AI 发布了 Kimi K3，一款拥有 2.8 万亿参数的模型。其架构为稀疏的 mixture-of-experts：每次请求只激活一小部分参数，因此算力成本远低于同等规模的稠密模型。它配备了一百万 token 的上下文窗口，以及一项名为 Kimi Delta Attention 的技术创新。该模型已可通过应用和 API 使用；完整权重预计将在 7 月 27 日前发布。

正是「开放」二字让这则消息意义非凡。若时间表如期兑现，Kimi K3 将成为有史以来发布的最大开放权重模型：任何人都能下载并自行运行。在独立评测中，它紧随美国最优秀的专有系统之后，领先于竞争对手多个近期版本，API 价格为每百万输入和输出 token 分别 3 美元和 15 美元。

其潜台词是地缘政治。当美国收紧对先进芯片出口的管控，中国的实验室则以效率与开放作答，推出体量庞大却运行成本低廉的模型。不过仍需一句提醒：许多基准由厂商自行报告，而首批独立测试显示，K3 即便处理简单任务也倾向于消耗大量推理 token。真正的效率，一如既往，要在实战中衡量，而非在幻灯片上。

这场竞赛不再只关乎谁造出最聪明的模型，还关乎谁把它免费送出。这是一种策略，而非慷慨之举，并且改变了所有人的规则。

— Olya