Kimi K3 达 2.8T 参数 — 内存是否取代了计算?
moonshot ai 发布了 kimi k3,这是一个利用内存而非原始计算能力的 2.8 万亿参数模型。这挑战了主导西方人工智能发展的缩放定律。
Moonshot AI 推出了 Kimi K3,这是一款于 7 月 16 日发布的 2.8 万亿参数的开放权重模型。该模型被归类为“3T 级别”,采用混合专家架构(Mixture-of-Experts),总参数量为 2.8 万亿,但每次推理大约只有 6000 亿参数被激活。通过专注于内存优化而非计算,该模型挑战了“更大的计算预算是通往通用人工智能(AGI)的唯一途径”的主流观念。