华为云,让AI算力入山河

news2025/2/21 20:28:56

9409edbeacf611657d14850d6dbac588.jpeg

整个2023年,全球科技界都在为大模型沸腾。云计算产业作为AI大模型与产业场景间的最短路径,自然也在大模型浪潮中备受关注。目前阶段,云厂商已经纷纷入局大模型,从多个角度探索大模型带给云计算产业的可能性。

但我们往往会忽略这样一个关键节点:“百模千态”的大模型,第一项挑战是AI算力。而做好大模型服务,首当其冲也要做好算力服务。

在AI算力这个最为基础的能力中,隐藏着AI云服务如何能走向更远的真正答案。

a30a1fb819f269a1b74a55372aabcc69.jpeg

9月21日,在华为全联接大会2023期间,华为常务董事、华为云CEO张平安围绕“共建智能世界云底座,让AI重塑千行万业”发表主题演讲,发布盘古大模型在矿山、政务、汽车、气象、医学、数字人、研发等领域的创新服务,并宣布华为云昇腾AI云服务正式上线,加快让千行万业实现大模型普惠。围绕盘古大模型落地,本次华为云分享的主题是“解难题,做难事”。让AI算力能用、够用、好用、有大用,就是华为云解开的第一道难题。

算力入山河,AI始落地。

为了做好这件重要的“难事”,昇腾AI云服务出发了。

大山大河,

需要AI大算力

18a10bbe13f50f6a04a6c373ccaa8a13.png

信息革命以来,人类逐步发现科技创新的幅度与算力消耗成正比,这一点在大模型身上又一次得到了印证。

大模型的出现和成熟,给千行万业智能化带来了全新的机遇。可以说,每个行业的每个场景都值得融入大模型,甚至其中大部分可以被大模型所重塑。而无论是大模型本身模型规模大、数据参数多的特点,还是各个行业涌现的大模型需求,都指向同一个结果:社会生产体系所消耗的AI算力,将得到指数级提升。

大模型需要大算力,已经成为了行业共识。但如果我们具体打开这个问题,会发现围绕AI算力产生的产业挑战非常多样。我们可以将其概括为供需矛盾、能效挑战、运维需求、安全顾虑四种。

先来看AI算力最为核心的挑战,即供需之间客观上的不平衡。

截至2023年7月,中国累计已经有130个大模型问世。“百模大战”带来了AI算力的巨量增长。根据相关数据报告,过去10年全球AI算力需求增长了30万倍,而未来10年我们还面临着需求500倍的增长。根据《2022-2023中国人工智能计算力发展评估报告》显示,在2022年中国进行的AI计算总量已经超过了通用计算。在可见的未来,AI算力将会变成社会各界需求量最大、供需缺口最大、资源最为紧张的计算形态。

其次是大模型与大算力,带来了尖锐的能效问题。

由于大模型训练需要集群式AI计算,因此其训练任务大量依靠数据中心,而AI服务器的功率密度远超普通服务器,单机柜的功耗是过去的6到8倍。在双碳大背景下,数据中心的能效比必须持续下降,因此大模型带来的计算能效问题已刻不容缓。如何在AI算力提升与能效比下降之间达成平衡,成为了产业界必须面对的问题。

31fd5f02c05532364d372efb0e9239ef.png

除此之外,我们还要看到AI算力在应用过程中发生了一系列运维难题。由于大模型的训练、部署目标各不相同,各自的训练与部署环境也差异巨大,期间也自然会产生网络时延、模型可靠性、运维管理门槛等运维问题。举个例子,一些大模型需要极大量级的算力集群来支撑,而大量服务器与计算单元之间的协同往往会出现问题,一旦计算单元出现问题,研发人员就需要重启训练。大模型训练中巨大的时间、人才、算力成本消耗,就发生在频繁的故障与重启训练任务当中。因此,大模型不仅需要AI算力充足,还需要算力服务精细,帮助用户降低整体运维难题。

最后,我们还要看到大模型带来新的安全顾虑。

由于大模型的部署场景大多事关国计民生,因此其安全隐患必须全部扫清。在数据访问、存储加密、传输安全等领域,大模型目前还存在着诸多的安全隐患。

整体而言,大模型并不是高度一致化的产品。其本身技术分类复杂、工程化路径多变,并且各个用户还需要根据自身需求进行大模型的精调与订制化工作。这些问题让大模型对AI算力服务有了多方面、多角度的差异化需求。

满足大模型的AI算力需求,已经成为了大模型时代的头一道考题。

4052c686c6bd7c8445a8f22a64279c08.png

把昇腾AI云服务

做实,做精,做成竞争力

对于华为云来说,要把算力这道题答好,需要兼顾两方面的建设:一个是如何让AI算力充足可用,另一个是如何跨越算力服务在运维、安全、能效等方面的挑战。AI算力既要做实,还要做精。

今年7月,华为云发布了最新的昇腾AI云服务,可以为千行万业的用户提供澎湃AI算力。在其背后,是华为云坚实的算力基础设施建设。

530b85f70b90864e7285c7e533cec36c.jpeg

截至目前,华为云在贵安、乌兰察布、芜湖建设了3大AI算力中心。基于此,昇腾AI云服务在全国范围内实现了20ms的时延圈。用户可以实现就近接入,一根光纤即可联接澎湃的AI算力,服务即开即用。为确保大模型训练数据的全生命周期安全,昇腾AI云服务还采用了数据传输与存储加密、数据安全清除、数据访问控制、数据水印防泄露等多重技术。值得注意的是,无论对于企业还是社会整体,云服务都是能效比最优的双碳时代AI算力获取方式。

c09c92ac946294c6298c3d37089aa6b0.jpeg

为了实现AI算力的极致性能,华为云还在基础设施之上进行了针对AI云服务的技术优化。比如ModelArts提供了数据、训练、推理三层加速,通过DataTurbo数据加速技术能够利用计算节点存储资源构建分布式缓存,将数据读取时延降低至亚毫秒级。TrainTurbo训练加速技术可以实现在训练数据超过100T时数据读取时间缩短50%,并使能整体训练效率提升20%以上。在模型的推理环节,InferTurbo推理加速技术通过图编译技术加速模型推理,通过全链路垂直协同优化,将大模型的推理性能提升30%。

在这样强大基建与核心技术加持下,用户可以获得极致的AI计算性能,而为了让算力不仅“够用”,还要“好用”,华为云进行了一系列把AI算力“做精”的探索。

比如说,AI开发有赖于工具与平台的全面。昇腾AI云服务背后,有着异构计算架构CANN、全场景AI框架昇思MindSpore、AI开发生产线ModelArts等一系列华为持续打造的AI底层开发工具与技术平台,从而为大模型提供分布式并行加速,算子和编译优化、集群级通信优化等关键能力,奠定AI算力服务的根技术加持。

如上文所说,在大模型训练、部署过程中还面临着一系列运维、能效等问题。在算力服务的优化方面,昇腾AI云服务可以提供更长稳的AI算力服务,千卡训练30天长稳率达到90%,还可以实现分钟级信息获取、2小时定界、24小时提供解决方案,断点恢复时长不超过10分钟,任务恢复时长小于半小时。

在模型迁移方面,华为云为用户提供了迁移工具链,并集成全栈的开发工具,能够实现典型模型迁移效率低至2周,主流场景自助迁移。此外,昇腾AI云服务还适配了业界主流的开源大模型,如LLAMA、Stable Diffusion等,从而真正让昇腾AI云服务满足“百模千态”的大模型需求。

对于运动员来说,基本功就是竞争力。在云+大模型的赛道上,华为云通过基建、技术、服务的集成,也把AI算力练成了竞争力。

澎湃易用的AI算力,是大模型产业化落地的基石,也是一切故事的开端。

算力,技术,场景:

构筑大模型正循环

0140d3432d4b78a7225ac045f34e4cf4.png

在大模型这个突然到来的巨大智能化机遇面前,千行万业的用户有着差异化巨大的需求。有人缺少算力,有人需要模型,有人寻觅场景,也有人需要特定技术工具的帮助。任何一个条件的缺失,都会让大模型的飞轮无法旋转。

换个角度看,算力资源、技术工具、模型的场景化应用都能变成支点。这些要素可以通过全栈配合、彼此推动的方式,帮助企业用户和开发者走上大模型之路。

华为云提供的昇腾AI云服务,不仅AI算力能用、够用,好用,还能通过与华为云一系列布局进行联动,让大模型从此“有大用”,从而共同实现盘古大模型解难题,做难事。

比如说,我们能够看到众多技术创新与昇腾AI云服务相辅相成,共同解决着AI算力需求大、供给难的挑战。华为云最新发布的分布式QingTian架构就有着这样的效果。

d885da6b20a9d044c60434c5ac7fa60c.jpeg

以AIGC为代表的大模型应用,算力需求特点是高度依赖分布式计算能力,这也对算力架构产生了新的挑战。分布式QingTian架构作为新一代对等架构,能够将传统的数据中心算力集群,演变为基于高速总线的对等池化系统集群,从而打破单一部件的性能限制,实现软硬协同、管控面全卸载、资源与性能零损耗,最终为用户带来性能、可靠性、安全可信等方面的极致体验。

除此之外,华为云还围绕不断发展的AI需求,在AI云存储、GaussDB向量数据库、数智融合、Serverless+大模型工程套件等一系列领域进行了技术创新,从系统架构层、数据处理层、模型训练层、应用开发层实现系统性创新,从而扫清了用户使用AI云服务过程中的障碍,让AI算力真正对齐到千行万业的场景化需求。

在基础AI算力与系列技术创新之上,就是华为云提供的盘古系列大模型。在华为全联接大会2023上,我们也可以看到盘古大模型在行业中有了更为深入的场景化落地。

35047a2b086916db8a5559d2f209b7c3.jpeg

在汽车行业,盘古汽车大模型能够覆盖车企的设计、生产、营销、研发等环节,并在自动驾驶训练、专用场景落地等领域发挥独特价值。在自动驾驶领域,盘古汽车大模型可基于实际场景采集的照片和视频,构建该场景的数字孪生空间,加入可移动的物体、可编辑的天气、光照等,生成供自动驾驶学习的场景样本。在港口、矿区等作业场景,盘古汽车大模型的多场景、多车型控制算法,可让60吨的重卡横向误差小于0.2米、精准停靠误差小于0.1米。目前在新疆疆纳矿业和内蒙古伊敏露天煤矿,已有23辆无人重卡在矿山中24小时不间断作业。

28f4c4cf1fdc7ca7de8aafc99dffea91.jpeg

在直播+数字人领域,盘古数字人大模型基于十万级高质量直播话术进行预训练,能够自动生成专业话术,从而准确、流利地介绍产品,并且还能自动捕捉弹幕和观众实时互动。在贵州丹寨,盘古数字人大模型已经让非遗产业蜡染走向全球。

bd3342ddd49aa5649f68cd14b65d7f7b.png

总结一下不难发现,华为云已经形成AI算力作为底座,技术创新作为驱动,盘古大模型融入行业场景为导向的“大模型正循环”。澎湃AI算力可以带动大模型的使用;技术创新将不断降低大模型的门槛;行业场景将带动大模型规模化落地。算力推动场景和技术发展;技术进步实现算力得到充分释放,场景价值被深入挖掘;场景的进步将带动算力建设,引领技术进步。三者滚动向前,吸引千行万业在云上寻找大模型的答案。

以算力为基础,以算力为钥匙,让AI融入山河大地——这便是华为云的AI长歌。

cf2c375cffed1dff1acc48ec240992ed.gif

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1042047.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【开发篇】八、SpringBoot整合MongoBD

文章目录 1、整合2、简单示例3、一点思考4、MongoDB的安装5、MongoDB的CRUD语法 1、整合 导入MongoBD的起步依赖:(这个starter背后是MongoDB的驱动和其他依赖,在这儿也可以看出命名的规律,redis的就是spring-boot-starter-data-r…

【数据结构-图】并查集

💝💝💝欢迎来到我的博客,很高兴能够在这里和您见面!希望您在这里可以感受到一份轻松愉快的氛围,不仅可以获得有趣的内容和知识,也可以畅所欲言、分享您的想法和见解。 推荐:kuan 的首页,持续学…

接口测试主要测试哪方面?需要哪些技能?要怎么学习?

1、什么是接口测试? 定义:测试系统组件间接口的一种测试。主要用于检测外部系统与系统之间以及内部各个子系统之间的交互点,重点是检查数据的交换,传递和控制管理过程,以及系统间的相互逻辑依赖关系等。 目的&#x…

选择合适的外贸公司邮箱注册服务提供商

随着全球化的发展,越来越多的企业开始涉足外贸领域。而在进行外贸业务时,邮箱是必不可少的工具之一。对于外贸公司来说,应该选择哪家邮箱服务提供商呢?口碑好安全性高的公司邮箱有Zoho Mail、阿里邮箱、腾讯邮箱、网易邮箱等。 首…

Spring cloud Sentinel介绍和安装

Sentinel介绍和安装 🌈初识Sentinel🌈安装Sentinel🌠docker 安装🌠下载sentinel镜像🌠启动sentinel镜像 🌠windows 安装🌠下载🌠运行 🌠sentinel访问 🌈微服务…

上海股票开户佣金最低是多少?怎么开万一账户!

上海股票开户佣金最低是多少?怎么开万一账户! 股票开户是指向证券公司或经纪人申请开通股票交易账户的过程。开户时需要提供个人身份信息和相关资料,完成相关的申请、签署协议以及缴纳开户费用。开户后,投资者就可以在证券市场上…

8年测试老鸟总结,Python自动化测试实现思路(细致)

目录:导读 前言一、Python编程入门到精通二、接口自动化项目实战三、Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结(尾部小惊喜) 前言 Python自动化测试…

NVM:切换node版本后无法使用npm全局包

1.新建文件夹npm_global和npm_cache 2.npm设置 npm config set prefix "C:\Users\18068\node\node_global" npm config set cache "C:\Users\18068\node\node_cache" 3.设置环境变量 新建NVM_PATH环境变量 选择缓存目录 编辑PATH环境变量 新建%NVM_PA…

睿趣科技:新手抖音开店卖什么产品好

抖音已经成为了一款年轻人热爱的社交媒体应用,同时也成为了一种全新的电商平台。对于新手来说,抖音开店卖什么产品是一个备受关注的问题。在这篇文章中,我们将探讨一些适合新手的产品选择,帮助他们在抖音上开店获得成功。 流行时尚…

docker自定义网络下 :不同容器的nginx通过容器名称相互访问PHP项目

场景:每个服务都有自己运行的一套环境,分别都有自己的nginx ;我们像用A容器的Nginx 的项目访问到B容器下的nginx项目内容,并且在自定义的网络下面 首先我们可以自定义一个网络:docker默认桥接: docker ne…

03. Springboot集成Mybatis-flex(一)

目录 1、前言 2、MyBatis-Flex 是什么? 3、框架功能对比 4、性能对比 5、快速使用 5.1、Maven添加依赖 5.2、数据源配置 5.3、创建实体类和表 5.4、创建Dao 5.5、创建Service 5.6、创建Controller接口测试 5.7、测试结果 6、小结 1、前言 现在主流的M…

git报错:git Permission denied, please try again.

1 问题描述: git clone/pull代码时提示输入密码,密码输入正确但是报错:git Permission denied, please try again. 2 解决方案: step1 检查SSH Key是否存在#cd ~/.ssh #lsstep2 获取SSH Key如果存在id_rsa.pub 或 id_dsa.pub 文件,跳过此步。 如果不存在,则生成: 先查…

浙江移动与中兴通讯合作项目被评为“光华杯”东部赛区一等奖!

近日,浙江移动携手中兴通讯共同打造的创新合作项目“构建面向东数西算的传输全光底座赋能美丽浙江”在2023年第二届“光华杯”东部赛区决赛中被评为一等奖,该项目以运力为核心,可实践应用于“东数西算”建设工程当中,提供高速无阻…

8. 基于消影点进行相机内参(主点)的标定

目录 1. ocam模型2. 消影点3. 基于消影点进行相机主点标定3.1 基于ocam模型的主点标定 感谢大家的阅读。 1. ocam模型 可以参考我的另一篇博客ocam模型。 这里简单提一下ocam模型: 这个模型将中心折反射相机和鱼眼相机统一在一个通用模型下,也称为泰勒模…

深眸科技迭代深度学习算法,以AI机器视觉技术扩围工业应用场景

智能制造是制造业数智化转型升级的发展方向,在当前以高端装备制造为核心的工业4.0时代背景下,越来越多的制造企业意识到机器视觉对于提高效率、降低成本,从而提升企业效益的意义。 目前,机器视觉已成为制造业迈向智能制造过程中极…

XC6206 低压线性稳压器 300mA低功耗LDO

XC6206系列是一款采用CMOS和激光修整技术制造的高精度、低能耗、3端子、正电压调压器。该系列提供了一个大的电流和一个明显的小的辍学电压。 XC6206由限流器电路、驱动器晶体管、精确参考电压和纠错电路组成。该系列兼容低ESR陶瓷电容。电流限制器的折叠电路作为短路保护以及输…

利用EXCEL进行XXE攻击

利用EXCEL进行XXE攻击 原因 原因 Microsoft Office从2007版本引入了新的开放的XML文件格式,新的XML文件格式基于压缩的ZIP文件格式规范,由许多部分组成。 我们可以将其解压缩到特定的文件夹中来查看其包含的文件夹和文件,可以发现其中多数是…

canvas绘制网格背景

/*** Event 方法* description: canvas 绘制网格背景* */drawGrid(element, lineColor, lineStepX, lineStepY, bgColor, bgStepX, bgStepY) {const canvas document.querySelector(element)const context canvas.getContext(2d)context.save();context.lineWidth 0.5;conte…

Mac cocoapods 3分钟安装教程( 国内镜像源方法)

参考链接:2023最新总结,Mac下使用Homebrew完全指南! - 知乎 1.打开终端, 执行: /bin/zsh -c "$(curl -fsSL https://gitee.com/cunkai/HomebrewCN/raw/master/Homebrew.sh)" 2.运行,可以选择清…

Hazelcast系列(二):hazelcast集成

系列文章 Hazelcast系列(一):初识hazelcast Hazelcast系列(二):hazelcast集成 目录 前言 集成 环境 配置 配置一 配置二 配置三 测试 其他 总结 前言 前面通过 Hazelcast系列(一):初识hazelcast 让我们对Hazelcast有了一个大…