月之暗面发布 Kimi K3:全球首个 2.8T 参数开源模型,性能比肩 Claude Fable 5

多模态模型3个月前发布 小马良
343 0

中国 AI 初创公司月之暗面(Moonshot AI)正式发布了 Kimi K3,这是一款拥有 2.8 万亿参数的混合专家(MoE)模型。作为目前全球最大的开源 AI 模型,Kimi K3 在长周期编码、复杂推理及多模态任务上展现了与 Anthropic Claude Fable 5 和 OpenAI GPT-5.6 Sol 等顶级闭源系统相媲美的性能。此次发布不仅标志着开源 AI 规模的又一次突破,也宣告了月之暗面在经历市场波动后的强势回归。

  • 官方介绍:https://www.kimi.com/blog/kimi-k3
  • API:https://platform.kimi.ai
月之暗面发布 Kimi K3:全球首个 2.8T 参数开源模型,性能比肩 Claude Fable 5

完整模型权重计划于 2026 年 7 月 27 日正式开源。

核心架构创新:为万亿规模而生

Kimi K3 并非简单的参数堆砌,而是通过一系列底层架构革新实现了高效的扩展:

  • Kimi Delta Attention (KDA) & Attention Residuals:这两项核心技术改进了信息在超长序列和极深网络中的流动效率。KDA 为注意力机制提供了高效基础,而 AttnRes 则通过选择性跨深度检索表示,避免了传统累积方式的冗余。
  • Stable LatentMoE:采用稀疏激活策略,在总共 896 个专家中仅激活 16 个。配合 Quantile Balancing(分位数平衡)和 Per-Head Muon 优化器,解决了大规模 MoE 训练中的路由不平衡难题。
  • 量化感知训练:从 SFT 阶段即引入 MXFP4 权重和 MXFP8 激活,确保了模型在广泛硬件上的兼容性与推理效率。
  • vLLM 贡献:针对 KDA 对前缀缓存的挑战,月之暗面向 vLLM 社区贡献了专用实现,支持带有预填充缓存的高效服务。
月之暗面发布 Kimi K3:全球首个 2.8T 参数开源模型,性能比肩 Claude Fable 5

性能表现:智能体能力的飞跃

Kimi K3 专为长周期、高自主性的智能体任务设计,在多个硬核领域展现出惊人潜力:

1. 🛠️ 极致编码与系统工程

  • 内核优化:在 GPU 内核优化任务中,Kimi K3 的表现与 Claude Fable 5 持平,显著优于 Opus 4.8 和 GPT-5.6 Sol。
  • 编译器开发:成功从头构建了 MiniTriton,一个紧凑且高效的类 Triton GPU 编译器,在某些工作负载下性能甚至优于原生 Triton。
  • 长周期会话:能够维持长达数小时的工程会话,自主导航大型代码库并编排终端工具。

2. 🎮 视觉在循环(Visual-in-the-Loop)

  • 游戏与前端开发:结合强大的 3D 推理与视觉能力,Kimi K3 能通过截图实时反馈迭代代码,将概念图转化为可玩的交互式体验。
  • CAD 辅助:利用视觉理解优化设计与建模流程。

3. 🔬 科学研究加速

  • 天体物理学复现:在约 2 小时内完成了通常需要研究员 1-2 周的工作。它审查了 20+ 篇论文,验证了 I-Love-Q 普遍关系,评估了 300+ 个状态方程,并生成了完整的数值流程代码及交互式仪表盘。
  • 芯片设计:在 48 小时自主运行中,使用开源 EDA 工具在 Nangate 45nm 库上完成了一款专用芯片的设计、优化与验证。

4. 📚 知识工作

  • 在内部评估中,Kimi K3 在端到端知识处理、文献综述及复杂逻辑推理方面均表现出一致的性能提升。
月之暗面发布 Kimi K3:全球首个 2.8T 参数开源模型,性能比肩 Claude Fable 5

可用性与定价

Kimi K3 现已通过以下渠道提供服务:

  • C 端应用:更新 Kimi App 或 Kimi Work 桌面版即可体验。
  • 开发者工具:在终端运行 Kimi Code 并通过 /model 命令选择 kimi-k3。
  • API 接入:
    • 缓存命中输入:$0.30 / MTok
    • 缓存未命中输入:$3.00 / MTok
    • 输出:$15.00 / MTok
  • 企业级服务:Kimi Enterprise 提供数据隐私保护与成员管理功能。

战略意义

Kimi K3 的发布是全球 AI 军备竞赛中的一个重要里程碑。它不仅证明了开源模型在参数量上可以触及 3T 级别,更在智能体自主性、长上下文理解和多模态闭环能力上树立了新标杆。对于需要处理超大规模代码库、进行复杂科学计算或构建高度自主 AI 助手的企业与研究者而言,Kimi K3 提供了一个强大且开放的基座选择。

随着 7 月 27 日权重的正式开源,全球开发者社区将迎来一次前所未有的技术盛宴,进一步推动开源 AI 生态向更深、更广的领域演进。

© 版权声明

相关文章