Kimi K3 正式发布

AI 技术1 次阅读来源:开源中国 AI 资讯
分享:

月之暗面在今日凌晨宣布,正式推出其迄今能力最强的模型 —— Kimi K3,一个 2.8 万亿参数模型。公告称,Kimi K3 是全球首个开源的 3 万亿级别模型,面向长程编程、知识工作和推理等前沿智能场景而设计。 Kimi K3 基于 KDA 混合线性注意力机制(Kimi Delta Attention)和注意力残差(Attention Residuals)技术构建,原生...

📖 本文为摘要内容,仅显示部分信息。

阅读原文

评论 (0)

0/500

9 + 9 = ?

暂无评论,来写第一条吧