华为云打造下一代云基础设施CloudMatrix,开启智能算力新纪元
发布时间:2024-07-03 06:34:48来源:网络转载
华为云下一代云基础设施CloudMatrix
华为云在其最新的技术突破中推出了下一代云基础设施——CloudMatrix。这一创新的解决方案在华为开发者大会上被详细介绍。
CloudMatrix的主要目标是解决当前云平台在大模型训练和使用中遇到的算力墙、内存墙和能效墙等问题。这些问题限制了AI应用的效果和效率。CloudMatrix通过改变传统数据中心的架构和算力供给模式,将传统的以CPU为中心的主从架构,演进为多元算力对等全互联架构;并通过高速互联网络协议,将CPU、NPU、GPU等算力资源全部互联和池化,从而把AI算力从单体算力演进到矩阵算力,开启智能算力新纪元。
华为云是业界唯一采用对等架构超节点技术提供算力服务的厂商,实现了业界领先的性能和可靠性。华为云超节点在算力方面相比业界单节点提升了50倍,大模型的checkpoint恢复时长低于10分钟,万卡集群线性度大于95%,远超业界水平。
基于盘古大模型5.0的实测数据显示,在同等算力条件下,CloudMatrix相较于传统服务器集群架构,在模型训练效率上提升了68%。这一显著的提升, 充分证明了CloudMatrix在云原生基础设施方面的技术领先性。
华为云通过AI的全栈系统性创新,并通过AI重塑云服务,从两个方面打造AINative的云。一方面是CloudforAI,即通过全栈系统性创新,能够让大模型的数据准备、训练、推理、应用实现全流程的高效率和高性能。另一方面是AIforCloud,除了系统性创新,华为云还将盘古大模型和华为在产品研发、数据治理、安全防护、业务运维等各个领域积累的数据和经验相结合,应用在了华为云CodeArts、DataArts、MetaStudio和GaussDB、云安全等系列云服务的智能化上。将华为云的服务重塑和升级,从而更智能、更高效。
综上所述,华为云下一代云基础设施CloudMatrix通过其创新性和先进性,不仅解决了传统云平台存在的问题,还通过提高性能和可靠性、提升模型训练效率以及重塑和创新服务等方面,开启了智能算力的新纪元。
华为云在其最新的技术突破中推出了下一代云基础设施——CloudMatrix。这一创新的解决方案在华为开发者大会上被详细介绍。
解决传统云平台问题
CloudMatrix的主要目标是解决当前云平台在大模型训练和使用中遇到的算力墙、内存墙和能效墙等问题。这些问题限制了AI应用的效果和效率。CloudMatrix通过改变传统数据中心的架构和算力供给模式,将传统的以CPU为中心的主从架构,演进为多元算力对等全互联架构;并通过高速互联网络协议,将CPU、NPU、GPU等算力资源全部互联和池化,从而把AI算力从单体算力演进到矩阵算力,开启智能算力新纪元。
性能和可靠性
华为云是业界唯一采用对等架构超节点技术提供算力服务的厂商,实现了业界领先的性能和可靠性。华为云超节点在算力方面相比业界单节点提升了50倍,大模型的checkpoint恢复时长低于10分钟,万卡集群线性度大于95%,远超业界水平。
模型训练效率提升
基于盘古大模型5.0的实测数据显示,在同等算力条件下,CloudMatrix相较于传统服务器集群架构,在模型训练效率上提升了68%。这一显著的提升, 充分证明了CloudMatrix在云原生基础设施方面的技术领先性。
服务重塑和创新
华为云通过AI的全栈系统性创新,并通过AI重塑云服务,从两个方面打造AINative的云。一方面是CloudforAI,即通过全栈系统性创新,能够让大模型的数据准备、训练、推理、应用实现全流程的高效率和高性能。另一方面是AIforCloud,除了系统性创新,华为云还将盘古大模型和华为在产品研发、数据治理、安全防护、业务运维等各个领域积累的数据和经验相结合,应用在了华为云CodeArts、DataArts、MetaStudio和GaussDB、云安全等系列云服务的智能化上。将华为云的服务重塑和升级,从而更智能、更高效。
综上所述,华为云下一代云基础设施CloudMatrix通过其创新性和先进性,不仅解决了传统云平台存在的问题,还通过提高性能和可靠性、提升模型训练效率以及重塑和创新服务等方面,开启了智能算力的新纪元。
本文链接:http://www.sijijing.com/content-25-2633-1.html
免责声明:本文为转载,非本网原创内容,不代表本网观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。
-
合资插混最强匮电也是龙 雪佛兰探界者Plus上市:14.99万起!
雪佛兰首款智电插混SUV探界者Plus今日正式上市,共推4款配置车型,售价区间14 99-17 99万元。该车采用新一代设计语言,延续美式SUV典型的设 [详细] -
光峰科技发布2023年财报:营收22.13亿元 经营现金流大增105%
4月26日晚间,光峰科技披露2023年年报。年报显示,2023年光峰科技实现营业收入22 13亿元;归母净利润实现1 03亿元;整体毛利率达到36 22%; [详细] -
张艺谋《第二十条》网播上线:爱奇艺、腾讯视频、优酷会员免费看
今日,张艺谋电影《第二十条》正式开启网播,上线爱奇艺、腾讯视频、优酷、芒果TV、B站等视频平台,开通平台会员后可免费观看。据了解,《 [详细] -
《蛋仔派对》注重保护未成年人网络安全 保护未成年人不受到诈骗
在目前这个飞速发展的数字化时代,互联网让我们的娱乐生活得到了极大的丰富,各种各样的游戏层出不穷,但网络安全问题也随之凸显,大额充值 [详细] -
百度:AI专利申请量、授权量国内第一
在第24个世界知识产权日来临之际,百度昨日举办专利运用赋能AI产业高质量发展论坛。在论坛上,百度首席技术官王海峰透露,百度在以大模型为 [详细]