发展趋势量子位5/10

阿里云:真武芯片超节点已成功适配Qwen3.8,上线百炼提供推理服务

By 量子位的朋友们

阿里云:真武芯片超节点已成功适配Qwen3.8,上线百炼提供推理服务
图源:量子位

原文正文

阿里云:真武芯片超节点已成功适配Qwen3.8,上线百炼提供推理服务

7月23日消息,阿里真武M890超节点已成功适配Qwen3.8,并上线阿里云百炼平台提供模型推理服务,这是国内首个成功运行超2万亿参数大模型的超节点。

Qwen3.8是阿里最新旗舰模型,参数规模高达2.4万亿,跑通这一规模的模型需要将参数分散到几十张甚至上百张高速互联的GPU卡,让万亿参数“跑得又稳又快”。然而,普通AI集群因通信带宽的局限,无法满足高吞吐、低延迟、高并发的需求。

真武M890是平头哥新一代训推一体AI芯片,原生支持FP32到FP4等多种数据精度,可应用于高精度训练、低精度和超低精度推理的全场景。真武超节点实例通过ICN Switch 1.0互联芯片,让64张真武M890实现了800GB/s的高速互联,显存规模达到9TB,单实例即可支撑大规模2万亿参数MoE模型的专家并行需求。

此外,阿里还从芯片到云平台层面实现了与Qwen模型的全链路优化,不仅可以丝滑跑通Qwen3.8,还能显著提升推理效率、降低推理成本。实测数据显示,通过算子优化和软硬件架构协同,该超节点实例在Agentic推理场景中最多可实现1.5倍的推理性能提升。

本文由阿里提供,量子位获授权转载,观点归原作者所有。

版权所有,未经授权不得以任何形式转载及使用,违者必究。

- 趋境科技华东区域总部落地钱江世纪城,五年内建成万卡级高品质 AI Token 工厂2026-07-23

- 贝壳财经启动“千帆竞发”计划,将征集百位优质创作者共建内容新生态2026-07-23

- 科大讯飞发布星火Token Factory,打造企业级AI模型智能路由与治理新底座2026-07-23

- 太初元碁携手上海人工智能实验室举办AI4S和新型模型架构算子优化赛2026-07-23

阅读原文
阿里云:真武芯片超节点已成功适配Qwen3.8,上线百炼提供推理服务 · AI Daily