• 回答数

    0

  • 浏览数

    77

  • 收藏数

    0

作者:admin 发表于 2026-7-23 16:34:14
跳转到指定楼层
IT之家 7 月 23 日消息,今日,阿里云宣布灵骏真武 M890 超节点实例已成功适配 Qwen3.8,并上线阿里云百炼平台提供模型推理服务,这是国内首个成功运行 超 2 万亿参数 大模型的超节点。



据介绍,Qwen3.8 是阿里最新旗舰模型,参数规模高达 2.4 万亿,跑通这一规模的模型需要将参数分散到几十张甚至上百张高速互联的 GPU 卡,让万亿参数“跑得又稳又快”。

然而,普通 AI 集群因通信带宽的局限,无法满足高吞吐、低延迟、高并发的需求。

IT之家注意到,真武 M890 是平头哥新一代训推一体 AI 芯片, 原生支持 FP32 到 FP4 等多种数据精度 ,可应用于高精度训练、低精度和超低精度推理的全场景。

灵骏真武 M890 超节点实例通过 ICN Switch 1.0 互联芯片,让 64 张真武 M890 实现了 800GB/s 的高速互联,显存规模达到 9TB,单实例即可支撑大规模 2 万亿参数 MoE 模型 的专家并行需求。

此外,阿里还从芯片到云平台层面实现了与 Qwen 模型的全链路优化,不仅可以丝滑跑通 Qwen3.8,还能显著提升推理效率、降低推理成本。

实测数据显示,通过算子优化和软硬件架构协同,该超节点实例在 Agentic 推理场景中最多可实现 1.5 倍的推理性能提升 。

相关阅读:



《 阿里云发布灵骏真武 M890 超节点实例,单台可承载十万亿参数级 MoE 大模型推理 》



《 阿里千问 Qwen3.8 预览版模型上线:2.4T 参数量,宣称“可能是除了 Fable 5 外最强大的模型” 》

[来源链接] https://www.ithome.com/0/980/677.htm
分享:
回复

使用道具

成为第一个回答人

高级模式 评论
您需要登录后才可以回帖 登录 | 立即注册
⚠️

AI客服助手

×
AI
您好!我是AI客服助手,有什么可以帮助您的吗?

请先登录后使用AI客服助手

立即登录
内容由非常AI大模型生成,仅供参考,相关风险需自行承担。

赚钱

会员VIP

留言板

商务合作

联系电话:17308937318

QQ邮箱

QQ:118275

邮箱:118275@qq.com

友情链接