当前位置:首页 > 厂商动态 > Arm
[导读]Arm CPU正在从根本上推动AI变革,并造福地球。Arm架构是未来AI计算的基石。​

人工智能(AI)具有超越过去一个世纪所发生的所有变革性创新的潜力,它在医疗保健、生产力、教育等领域为社会带来的益处将超乎我们的想象。为了运行这些复杂的AI工作负载,全球数据中心所需的计算量需要以指数级规模进行扩展。然而,这种对计算无止尽的需求也揭示了一个严峻的挑战:数据中心需要庞大的电力来驱动AI这一突破性技术。

当今的数据中心已经消耗了大量的电力——全球每年需要460太瓦时(TWh)电力进行支持,这个数字等同于整个德国的用电量。而AI的兴起预计将在2030年把该数字提高三倍,意味着将超过印度这一世界上人口最多国家的总耗电量。

未来的AI模型将持续变得更大、更智能,在带动对更多计算能力的需求的同时,对电力的需求也会增加,从而成为良性循环的一部分。而找到降低这些大型数据中心电力需求的方法对于实现社会性突破和兑现AI的承诺至关重要。

换言之,没有电力就无法实现AI,企业需要重新思考如何应对能效问题的方方面面。

重新构思AI的未来——一个由Arm平台驱动的未来

Arm最初的产品就是为使用电池的设备而设计的,并推动了移动电话的变革。因此,深植于Arm的能效DNA能使业界重新思考应如何构建芯片来满足AI日益增长的需求。

在典型的服务器机架中,仅计算芯片就可以消耗超过50%的电力预算。工程团队正在寻找各种可以降低该数字的方法,每一瓦特的减少都至关重要。

正因为此,全球最大的AI头部云服务提供商们转而采用Arm技术来降低功耗。与同行业中的其他产品相比,Arm最新的Arm Neoverse CPU是面向云数据中心,性能最高、最节能的处理器。Neoverse为头部云服务提供商提供了定制芯片的灵活性,以优化其苛刻的工作负载,同时提供领先的性能和能效。每一瓦特的节省都可以用来实现更多的计算。这也正是为什么亚马逊云服务(AWS)、微软、Google和甲骨文(Oracle)现在都通过Neoverse技术,处理其通用计算和基于CPU的AI推理和训练。Neoverse平台正在成为云数据中心领域的事实标准。

从近期的行业内的发布来看:

基于Arm架构的AWS Graviton:与其他同行业产品相比,Amazon Sagemaker的AI推理性能提高了25%,Web应用程序提高了30%,数据库提高了40%,效率则提升了60%。

基于Arm架构的Google Cloud Axion:与传统架构相比,其性能和能效分别提高了50%和60%,可为基于CPU的AI推理和训练、YouTube、Google地球等服务提供支持。

基于Arm架构的Microsoft Azure Cobalt:性能高出同类产品40%,并为Microsoft Teams等服务提供支持,与Maia加速器的耦合驱动Azure的端到端AI架构。

Oracle Cloud采用基于Arm架构的Ampere Altra Max:与传统同类产品相比,每机架服务器的性能提高2.5倍,能耗降低2.8倍,并用于生成式AI推理模型,诸如摘要、大语言模型训练的数据的标记化,以及批量推理用例。

显然,Neoverse极大地提升了云端通用计算的性能和能效。此外,合作伙伴也发现在加速计算方面,Neoverse也能带来同样的益处。大规模AI训练需要独特的加速计算架构,例如,NVIDIA Grace Blackwell平台(GB200)结合了NVIDIA的Blackwell GPU架构与基于Arm架构的Grace CPU。这种基于Arm技术的计算架构可实现系统级设计优化,与面向大语言模型的NVIDIA H100 GPU相比,可带来25倍的能耗降低,并将每个GPU的性能提高30倍。这些优化能够带来颠覆性的性能和节能效果,而这一切都得益于Neoverse所带来的前所未有的芯片定制灵活性。

随着基于Arm架构的部署持续扩大,这些企业将可以节省高达15%的数据中心总能耗。这些巨幅的节省可以用来在相同的功率范围内驱动额外的AI运算,而不会增加能源负担。换言之,这些节能相当于可以额外运行20亿次ChatGPT查询,驱动四分之一的日常网络搜索流量,为20%的美国家庭提供照明,或为与哥斯达黎加面积相仿的国家进行供电。这对改善能源消耗和环境可持续性产生了惊人的影响。

Arm CPU正在从根本上推动AI变革,并造福地球。Arm架构是未来AI计算的基石。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

9月2日消息,不造车的华为或将催生出更大的独角兽公司,随着阿维塔和赛力斯的入局,华为引望愈发显得引人瞩目。

关键字: 阿维塔 塞力斯 华为

加利福尼亚州圣克拉拉县2024年8月30日 /美通社/ -- 数字化转型技术解决方案公司Trianz今天宣布,该公司与Amazon Web Services (AWS)签订了...

关键字: AWS AN BSP 数字化

伦敦2024年8月29日 /美通社/ -- 英国汽车技术公司SODA.Auto推出其旗舰产品SODA V,这是全球首款涵盖汽车工程师从创意到认证的所有需求的工具,可用于创建软件定义汽车。 SODA V工具的开发耗时1.5...

关键字: 汽车 人工智能 智能驱动 BSP

北京2024年8月28日 /美通社/ -- 越来越多用户希望企业业务能7×24不间断运行,同时企业却面临越来越多业务中断的风险,如企业系统复杂性的增加,频繁的功能更新和发布等。如何确保业务连续性,提升韧性,成...

关键字: 亚马逊 解密 控制平面 BSP

8月30日消息,据媒体报道,腾讯和网易近期正在缩减他们对日本游戏市场的投资。

关键字: 腾讯 编码器 CPU

8月28日消息,今天上午,2024中国国际大数据产业博览会开幕式在贵阳举行,华为董事、质量流程IT总裁陶景文发表了演讲。

关键字: 华为 12nm EDA 半导体

8月28日消息,在2024中国国际大数据产业博览会上,华为常务董事、华为云CEO张平安发表演讲称,数字世界的话语权最终是由生态的繁荣决定的。

关键字: 华为 12nm 手机 卫星通信

要点: 有效应对环境变化,经营业绩稳中有升 落实提质增效举措,毛利润率延续升势 战略布局成效显著,战新业务引领增长 以科技创新为引领,提升企业核心竞争力 坚持高质量发展策略,塑强核心竞争优势...

关键字: 通信 BSP 电信运营商 数字经济

北京2024年8月27日 /美通社/ -- 8月21日,由中央广播电视总台与中国电影电视技术学会联合牵头组建的NVI技术创新联盟在BIRTV2024超高清全产业链发展研讨会上宣布正式成立。 活动现场 NVI技术创新联...

关键字: VI 传输协议 音频 BSP

北京2024年8月27日 /美通社/ -- 在8月23日举办的2024年长三角生态绿色一体化发展示范区联合招商会上,软通动力信息技术(集团)股份有限公司(以下简称"软通动力")与长三角投资(上海)有限...

关键字: BSP 信息技术
关闭