国产大模型团队 Moonshot AI今日在 Hugging Face 正式发布技术报告 《Kimi LinMoear Tech Report》（报告链接），宣布推出全新架构 Kimi Linear—— 一种可直接替代on完全注意力机制（Full Attention）的混合线性架构，兼具高效性与卓越性能，被视为“智能体时代注sh意力机制的新起点”。

报告显示，Kimi Linear 在 速度、内存效率和长上下文处理能力三方面均实现了重大突ot破。该模型可将 KV 缓存使用量减少高达75%，并在 100万（1M）上下文长度下实现 高达6倍的解码吞吐量提升， A极大地优化了长文本推理和多轮对话性能。

Kimi Linear 的核心创新在于三项关键技术:

• Delta AtI发tention:一种硬件高效的线性注意力机制，采用门控 Delta 规则优化结构，实现性能与能耗的平布 衡;

• Linear Architecture:首个在多项指标上全面超越传统完全注意力机制的混合线性架构，Ki兼顾速度与模型表达能力;

• 开放生态与实证验证:Moonshot 提供了 开源 KDA 内核、vLLM 集成支持和 模mi型检查点，并进行了大规模、公平的对比实验，验证了 Kimi Linear 的稳定性与可扩展性。

Moons Lhot AI 表示，Kimi Linear 不仅是一项架构创新，更是为智能体（AI Agent）时代设计的基础机制in。随着线性注意力技术的成熟，其有望在长上下文推理、智能助手、多模态生成等应用场景中成为下一代标准ea。

地址：https://huggingface.co/moonshotai/Kimi-Linearr:-48B-A3B-Instruct

• ·云计算开发实例：Python3计算字典值之和
• ·成本激增 今年亚马逊Prime Day促销可能有点“抠”
• ·英国公司起诉微软索赔3.7亿美元：打压二手软件交易
• ·人工智能专利申请量达到世界第一，占全球总量的近3/4
• ·标签: 阿里巴巴 蔡崇信 马云 首席财务官
• ·标签: 中科宇航 力箭系列 杨毅强 商业航天
• ·标签: 俞敏洪 孙东旭 东方甄选
• ·标签: Hindustan Zinc Vedanta Group 锌生产商 白银产量
• ·标签: 知乎 第三季度 付费会员 营销服务
• ·Docker 发布开发团队 2021 年三个首选方向
• ·谷歌FB推特CEO三月底将再次参加国会听证会：事关假新闻
• ·亚马逊正在进一步蚕食传统媒体的市场份额
• ·谷歌发布史上超强人类大脑「地图」，在线可视3D神经元「森林」
• ·香港金管局公布AI沙盒名单，蚂蚁数科成核心技术合作伙伴
• ·第四范式NeurIPS 2020：知识图谱嵌入的自动化
• ·标签: OpenAI Red Queen Bio 生物安全 AI风险