← 全部模型

Kimi-Linear-48B-A3B-Base

发布时间 发布主体 Moonshot AI

模型定位

Kimi-Linear-48B-A3B-Base 是 Kimi Linear 系列的预训练基础语言模型,面向语言模型研究、继续训练和应用开发。模型共有约 480 亿参数,每次推理激活约 30 亿参数;官方同时发布了单独的 Instruct 版本。(github.com)

能力与用途

  • 采用 Kimi Delta Attention(KDA)与多头潜在注意力(MLA)混合架构,官方标注的上下文长度为 100 万 token。(huggingface.co)
  • 可用于文本生成、长上下文任务及注意力架构研究,也可作为后续微调的基础模型。官方报告称,在其比较条件下,100 万 token 上下文的 KV 缓存使用量最多降低 75%,解码吞吐量最高提升约 6 倍;实际表现取决于任务和部署条件。(arxiv.org)
  • 官方发布了预训练模型检查点、KDA 内核及相关实现;模型卡标注许可证为 MIT。(huggingface.co)

限制

  • Base 是预训练版本,并非指令微调版本;直接用于对话或遵循复杂指令时,可能需要进一步微调和评估。
  • 100 万 token 是官方标注的模型上下文长度,实际可用长度和推理效率受推理框架、硬件及部署配置限制。
  • 官方性能数据是特定实验条件下的结果,不应视为所有任务均能达到的保证。(huggingface.co)

发布日期

2025 年 10 月 30 日;官方技术报告于该日首次发布。(arxiv.org)

价格

截至 2026 年 11 月 17 日,查询官方国内和国际平台后,未核实到此 Base 版本的官方托管 API 输入或输出计费价格;不能将其他 Kimi 模型的价格套用于本模型。自行部署仍可能产生硬件和运行成本。(platform.kimi.com)

官方来源