关闭广告

华为云CEO:CloudMatrix超节点可实现百万卡超大集群

观察者网85人阅读

9月19日,在华为全连接大会2025主题演讲环节,华为常务董事、华为云计算CEO张平安围绕“全面智能化,成就行业AI先锋”,分享了华为云在AI云服务、大模型、具身智能、AI Agent等领域的技术创新与落地实践。华为高级副总裁、华为云全球Marketing与销售服务总裁杨友桂分享了数智化时代下,华为云帮助企业实现全球业务成功的创新技术和经验思考。

超节点可实现百万卡超大集群

华为云CloudMatrix384昇腾AI云服务已全面上线。未来华为CloudMatrix超节点规格将从384卡升级到8192卡,可实现50-100万卡的超大集群。华为云首创EMS弹性内存存储服务,用内存扩展显存,显著降低大模型多轮对话时延,大幅提升模型使用体验。

随着AI算力需求的暴增,传统的数据中心已不适合构建高效的AI基础设施,单机柜功率要从10千瓦/每柜,升级到70千瓦/每柜,甚至是200千瓦/每柜,要从风冷转变到全液冷。华为云在贵州、内蒙古、安徽部署了全液冷AI数据中心,实现单机柜80千瓦散热,PUE低至1.1,并能够实现AI智能运维。企业无需改造或新建传统数据中心,通过一对光纤,就能获取华为云上高效的AI算力,也可以获得全栈专属AI云服务。

张平安指出,Token服务可以有效屏蔽复杂的底层技术,直接为用户提供最终的AI计算结果,是最高效的推理算力使用方式。CloudMatrix384超节点将算力、内存、显存等资源全面池化,把计算型任务、存储型任务、AI专家系统解耦,将串行任务变成分布式并行任务,极大地提升了系统的推理性能。在在线、近线和离线等不同时延推理场景中

上一页 下一页
版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

中国科学院突破电解水制氢技术瓶颈,MOFs 电极实现规模化应用

IT之家 浏览 78

与蒋欣分手2年的王阳,现在过得怎么样?

探长影视解说 浏览 74

9月又有大事发生!考虑全球资产配置的,该行动了!

智谷趋势 浏览 82

李平康:国安在谈一名东欧外教,其人在北京&还是以前的渠道

懂球帝 浏览 42

吸职工血、吞救命钱,42岁的她如今沦为过街老鼠

芳芳历史烩 浏览 24

印度双响炮!坠机塌桥献礼”迪,摔出世界纪录

浏览 126

把文化讲“活”:网络大V在流量之上的追求

澎湃新闻 浏览 83

嘎子被行拘!直播带货再度翻车,潘长江也救不了他了

电和影 浏览 86

美方要求哈马斯撤出以军控制区

界面新闻 浏览 44

但丁《神曲》的爱与救赎,在700年后迎来了答案

时尚COSMO 浏览 71

特朗普专机着陆区附近发现"狩猎架" FBI证实介入调查

红星新闻 浏览 57

美国中产阶层信心降温

国际金融报 浏览 87

硅谷巨头强强联手!谷歌与Meta达成100亿美元云计算合同

财联社 浏览 72

成本3元卖60元,“99%高纯”磷虾油实测核心成分为0!百年同仁堂“栽”在贴牌上

国际金融报 浏览 19

MIT和斯坦福打造"超级听力"AI:让机器像人耳一样理解声音的奥秘

科技行者 浏览 87

数十架飞机被扣俄罗斯 有公司计提减值损失57.8亿元

第一财经资讯 浏览 94

“国产GPU四小龙”扎堆上市,摩尔线程会成为史上最赚钱新股吗?

郭施亮 浏览 22

拥抱变局!2025外滩年会揭幕,聚焦新秩序、新科技

国际金融报 浏览 47

英媒:面对美国 欧洲领导人"必须学会反击"

环球网资讯 浏览 20

一块“十全十美”饼干,盛满星辰大海的甜

我们的太空 浏览 33

新年第一周,省委书记密集提出新要求!

国是直通车 浏览 22
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-12