AI 资讯AI NEWS RADAR
值得关注论坛社区2026-10-22 22:41

Cerebras 部署万亿参数 AI 模型

Cerebras 发布了一篇工程解析,讲解如何在其 WSE-3T 晶圆级芯片上部署万亿参数前沿模型。以开源模型 Kimi K3(约 3 万亿参数,69 层线性注意力 + 24 层稠密层)为示例,算出共需 59 片晶圆(4-bit 量化),可实现万亿参数级模型 1000–2000+ tokens/秒的推理速度。重要性在于它公开了晶圆级推理的内存分配、流水线与并发设计的具体细节,这是 GPU 集群之外服务超大模型的另一条关键路线。

报道来源
最新动态