大模型“诸神之战”,落地才是赛点

news2024/11/20 2:23:04

ChatGPT 诞生已经快一年,你还在与它对话吗?

有的人用来写报告、改代码,让它成为得力帮手;有的人却只是“调戏”个两三回,让它创作诗歌或故事,便不再“宠幸”。

根据网站分析工具 SimilarWeb 的数据,后者情况似乎更多。目前 ChatGPT 的月活数据已经连续三个月下滑,浏览量从四月的 17.6 亿下滑至八月的 14.3 亿,似乎开始有些过气。

一边是 ChatGPT 这样的通用大模型在退烧,一边是行业大模型研发热度只增不减。

国产大模型正在掀起一场“诸神之战”,然而不少企业都被卡在关键一步,那就是落地。

技术仅是门槛,落地才是赛点

和当年互联网“百团大战”比起来,这一回正在上演的“百模大战”要更内卷,也更烧钱。赛迪顾问数据显示,截至 2023 年 7 月,中国已累计有 130 个大模型问世 [1]。

《中国人工智能模型大地图研究报告》也指出,全国正有 14 个省(市)开展大模型研发。研发主体里,既有国内大学、科研机构,也有包括互联网巨头在内的企业,大佬们纷纷披甲上阵,准备迎接狂热的未来 [2]。

比起专业性弱的通用大模型,国内偏爱的行业大模型,基于各行业数据训练,结合专有知识和经验,更适用于具体场景的工作,能真正服务好千行万业。

但如果将大模型的问世比喻成研发的阶段性毕业,如今的现实情况是,没几个行业大模型能成功“上岗”。大模型能重塑行业,听起来似乎还是“空中楼阁”。

这其中最大的拦路石便是“落地难”。因为像“吞金兽”一样的 AI 大模型,训练成本真不是一般的高。没有雄厚的资金做支撑,很难商业落地。

由斯坦福大学发布的 2023 AI Index 年度报告,基于已有大模型披露的硬件和训练时间,对其训练成本进行了估算。

图片

2019 年发布的 GPT-2,被认为是第一个大型语言模型,拥有 15 亿个参数,估计需要五万美元的训练费用 [3]。

仅仅三年时间,2022 年推出的旗舰大型语言模型之一的 PaLM 拥有 5400 亿个参数,估计成本在 800 万美元。它比 GPT-2 大了约 360 倍,成本也高出了 160 倍 [3]。大模型规模变得越来越庞大,但也愈发昂贵。

落地难的原因除了成本高昂,还有 AI 发展的基础“燃料”算力比较有限。

如果把大模型比较一辆车,那它能走多远,正是取决于算力这个引擎。训练大模型,需要将数据集进行重复多轮计算处理,算力大小就代表着数据处理能力的强弱。

面对大模型数量成倍的增长,这几年中国智能算力规模也正在经历井喷式高速增长。

根据 IDC 发布的《2022-2023 中国人工智能计算力发展评估报告》,2023 年中国智能算力规模已达到 427 每秒百亿亿次浮点运算。预计到 2026 年,智能算力规模将进入每秒十万亿亿次浮点运算级别 [4]。

图片

早在今年 4 月 5 日,OpenAI 就以需求量过大为由,暂时关闭了 ChatGPT Plus 的付费渠道,这意味着仅发布几个月,OpenAI 就开始面临算力缺口 [5]。

大模型这场豪华游戏,能留在牌桌的玩家,注定只是少数。

所以别看大模型喧嚣盛极一时,但当面对成本、算力等现实问题时,国内外市场也正在出现更多理智思考——无法落地商用的通用大模型只能是玩具,成为企业应用的行业大模型才有产业价值 [6]。

AI 深入行业,

知识计算是关键

在国内,从华为云盘古大模型、阿里通义千问,再到 360 智慧大脑、智谱 AI ChatGLM 等,AI 大模型层出不穷。

不少人开始好奇《流浪地球》里不断学习,变得无所不能的最高人工智能莫斯是不是要走进现实了?

也有人担心有朝一日自己的饭碗会不会被 AI 抢走?但从麦肯锡全球研究院调研数据看,下此定论为时尚早。在 2020 年的人工智能全球调研中,AI 在不同行业的平均渗透率为 12.8%,处于较低水平 [7]。

更关键的是,AI 大模型和打工人并非互相取代的关系。而是大模型带来的新机会,能够提升工作效率、释放员工做更多高价值的事情。

图片

为何现阶段的 AI 深入行业程度还不够?

原因是不同行业都有自己数十上百年的专业积累,却缺乏高效利用的方法。解决这个难题的关键,在知识计算。

所谓知识计算,华为云认为就是把各种形态的知识,通过 AI 技术进行抽取、表达后,协同大量数据进行计算,进而产生更为精准的 AI 模型,从而提高行业效率。

为了能提供满足行业场景的多项技能,华为云团队使用 40TB 的文本数据,包含大量通用知识与行业经验,训练盘古自然语言大模型,为行业大模型打下坚实基础。

下一个问题接踵而至——行业专家与 AI 专家合作时,双方如何互相听得懂?华为云的做法是派 200 个博士深入客户现场,“走田头、跑工地、下矿井、进车间”,抓住 AI 技术创新与业务需求的结合点,解决行业难题。

图片

图片

200 多个博士深入行业现场,抓住 Al 技术创新与业务需求的结合点

像汽车领域,为了找到盘古大模型和自动驾驶行业的切入点,华为云深入一线交流请教,梳理行业业务和技术痛点。

现有自动驾驶技术能应对 95% 的常见驾驶场景,剩余 5% 是各类不常见却不断出现的“长尾问题”,阻碍更高智能化的自动驾驶落地。

盘古汽车大模型基于超车线路构建不同的光照、天气、建筑,快速生成近百个样本,生成灵活编辑的虚拟空间,重塑自动驾驶的训练,让模型更好学习应对“长尾问题”。现在学习一个新的复杂场景,时间能从两周以上缩短到两天内。

图片

除了汽车行业,华为云已陆续推出矿山、药物分子、电力、气象、海浪、铁路、政务、金融、制造等大模型,贡献先进的算法和解决方案,在行业内大展身手。

今年夏天,台风“泰利”“杜苏芮”“苏拉”“海葵”先后接棒登陆沿海地区,路径复杂,影响范围广,致灾程度高。如果能精准预测台风路径、级别和经过的地方,就能提早做准备。

但气象预测一直是科研领域的重难点。而盘古气象大模型,不仅将预测时间从 4-5 小时缩短到十秒内,而且在精度上超过传统数值预报方法。

可以说,AI 预报的出现,给天气预报带来了全新可能。

大模型落地,

盘古还使哪些力

前面提到,训练大模型一天也离不开海量的算力。有人形容算力就像我们日常用的水和电一样,要“一点接入、即取即用”。

大模型热潮下,面对企业算力需求的爆发式增长,“算力饥渴”成为了亟待解决的问题。

华为云基于系统性的创新,升级现有数据中心架构,突破单台服务器部件的限制,拆解和重新组合原来以 CPU 为中心的主从架构,升级为各种资源对等的全互联架构——分布式 QingTian 架构。

分布式 QingTian 架构打破了算力、存储和网络的边界,不仅实现高性能 AI 算力,轻松应对万亿级大模型训练,还将助力各行各业直接上云,一步到位搭建业务,更快更稳更高效。

图片

图片

QingTian 架构是基于高速网络协议的分布式对等全互联架构

得益于这一 AI 算力基础设施 ,企业使用华为云昇腾 AI 云服务时,只需要通过一根光纤,便能直接在云上获取算力,随取随用,让大模型算力触手可及。

今年七月,华为云海宣布在乌兰察布和贵安上线昇腾 AI 云服务,提供更长稳的 AI 算力服务;还发布了乌兰察布汽车专区,为自动驾驶开发提供澎湃算力。

开放性是昇腾 AI 云服务的重要优势之一,除了支持盘古大模型,更适配业界主流的近一百个开源大模型。

例如,美图仅用一个月就将 70 个模型迁移到了华为云昇腾 AI 云服务,同时华为云和美图团队一起进行了算子的优化,AI 性能提升了 30%。

图片

如何将大模型应用到行业具体业务和场景中?除了自己做落地,华为还希望构建起一个繁荣的生态。

大模型的创新,从来都不仅仅是模型自身的创新以及各项 AI 根技术的创新,在算力、算法、平台、应用、服务等方面都需要全链条生态伙伴和客户的参与。

打个比方,盘古大模型就像是各个行业通用的“轮子”,加入生态的伙伴都可以在车上找到自己的位置,共同助力,让这辆车跑得更快,行得更远。

为此,华为云开放了全方位的生态合作路径,希望团结伙伴加入盘古大模型全域协同生态体系,真正让 AI 重塑千行万业。

图片

一直以来,华为云践行的就是做实事、做最难的事。

一方面深耕算力,打造强有力的算力底座,支撑人工智能事业发展;另一方面结合大模型,从通用大模型到行业大模型的研究创新,来让人工智能真正服务好千行万业。

9 月 20-22 日,华为全联接大会在上海举办,大会以“加速行业智能化”为主题,汇聚业界思想领袖、商业精英、技术大咖、先锋企业、运营商、生态伙伴以及开发者等产业伙伴,共同探讨智能化技术的发展方向和未来机遇,加速行业智能化。

华为云认为,人工智能的发展,关键要“走深向实”,赋能产业升级,服务好千行万业、服务好科学研究,唯有这样,才能共赢人工智能新时代。

如何学习大模型

现在社会上大模型越来越普及了,已经有很多人都想往这里面扎,但是却找不到适合的方法去学习。

作为一名资深码农,初入大模型时也吃了很多亏,踩了无数坑。现在我想把我的经验和知识分享给你们,帮助你们学习AI大模型,能够解决你们学习中的困难。

我已将重要的AI大模型资料包括市面上AI大模型各大白皮书、AGI大模型系统学习路线、AI大模型视频教程、实战学习,等录播视频免费分享出来,需要的小伙伴可以扫取。

一、AGI大模型系统学习路线

很多人学习大模型的时候没有方向,东学一点西学一点,像只无头苍蝇乱撞,我下面分享的这个学习路线希望能够帮助到你们学习AI大模型。

在这里插入图片描述

二、AI大模型视频教程

在这里插入图片描述

三、AI大模型各大学习书籍

在这里插入图片描述

四、AI大模型各大场景实战案例

在这里插入图片描述

五、结束语

学习AI大模型是当前科技发展的趋势,它不仅能够为我们提供更多的机会和挑战,还能够让我们更好地理解和应用人工智能技术。通过学习AI大模型,我们可以深入了解深度学习、神经网络等核心概念,并将其应用于自然语言处理、计算机视觉、语音识别等领域。同时,掌握AI大模型还能够为我们的职业发展增添竞争力,成为未来技术领域的领导者。

再者,学习AI大模型也能为我们自己创造更多的价值,提供更多的岗位以及副业创收,让自己的生活更上一层楼。

因此,学习AI大模型是一项有前景且值得投入的时间和精力的重要选择。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1838228.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

LeetCode322.零钱兑换(一)

LeetCode刷题记录 文章目录 📜题目描述💡解题思路⌨C代码 📜题目描述 给你一个整数数组 coins ,表示不同面额的硬币;以及一个整数 amount ,表示总金额。 计算并返回可以凑成总金额所需的 最少的硬币个数 。…

lib9-03 配置基于时间的 ACL

实验:配置基于时间的 ACL 1、实验目的 通过本实验可以掌握定义 time-range 的方法基于时间 ACL 的配置和调试方法 2、实验拓扑 实验拓扑如下图所示。本实验要求只允许主机 PC1 在周一到周五每天的 8:00-17:00 访问路由器 R3 的Telnet 服务…

DAY7-力扣刷题

1.外观数列 38. 外观数列 - 力扣(LeetCode) 「外观数列」是一个数位字符串序列,由递归公式定义: countAndSay(1) "1"countAndSay(n) 是 countAndSay(n-1) 的行程长度编码。 //考虑递归和迭代两种思想 amazing!!! //…

康谋分享 | 从CAN到CAN FD:ADTF在汽车网络中的应用

随着汽车电子技术的发展,车辆上配备了越来越多的电子装置,这些设备多采用点对点的方式通信,这也导致了车内存在庞大的线束。造成汽车制造和安装的困难并进一步降低汽车的配置空间,汽车总线逐步开始向网络化方向发展。 在此背景下…

解决typora 上传图片问题

解决typora 上传图片问题 最近在写博客的时候,经常是在typora上先写在导入,但是发现在导入的时候图片上传不了,需要手动上传,这就很麻烦了,所以今天根据typora自动上传图片的功能解决一下上传图片的问题 一、下载PicGo…

QTimeEdit、QDateEdit、QDateTimeEdit、QCalendarWidget

实验 QTime和字符串相互转换 QDate和字符串相互转换 QDateTime和字符串相互转换 QCalendarWidget使用 year,month,day,minute,second,msec,dayOfWeek, dayto方法/属性的使用 布局 datetimeexample.cpp #inc…

九、数据结构(并查集)

文章目录 1.并查集操作的简单实现2.解决问题3. 并查集优化3.1 合并的优化3.2查询优化3.3查询优化2 通常用“帮派”的例子来说明并查集的应用背景&#xff1a;在一个城市中有 n ( n < 1 0 6 ) n(n < 10^6) n(n<106)个人&#xff0c;他们分成不同的帮派&#xff0c;给出…

42、基于神经网络的训练堆叠自编码器进行图像分类(matlab)

1、训练堆叠自编码器进行图像分类的原理及流程 基于神经网络的训练堆叠自编码器进行图像分类的原理和流程如下&#xff1a; 堆叠自编码器&#xff08;Stacked Autoencoder&#xff09;是一种无监督学习算法&#xff0c;由多个自编码器&#xff08;Autoencoder&#xff09;堆叠…

报表控件Stimulsoft 图表轴的日期时间步长模式

Stimulsoft Ultimate &#xff08;原Stimulsoft Reports.Ultimate&#xff09;是用于创建报表和仪表板的通用工具集。该产品包括用于WinForms、ASP.NET、.NET Core、JavaScript、WPF、PHP、Java和其他环境的完整工具集。无需比较产品功能&#xff0c;Stimulsoft Ultimate包含了…

Mellanoxnvidia ib高速网络常用命令总结

1.spci&#xff1a;检查本地的pci设备。示例&#xff1a;lspci| grep -i mell 2.ofed_info&#xff1a;检测ofed驱动版本。示例&#xff1a;ofed_info-s 3.ibstat&#xff1a;查看本机的ib网卡状态。 4.mst&#xff1a;mellnoax软件管理工具。用来生成IB设备描述符。提供给其他…

华北水利水电大学-C程序设计作业

目录 基础题 1-1 分析 代码实现 1-2 分析 代码实现 1-3 分析 代码实现 1-4 ​编辑 分析 代码实现 1-5 分析 代码实现 1-6 分析 代码实现 基础题 1-1 从键盘输入10个学生的有关数据&#xff0c;然后把它们转存到磁盘文件上去。其中学生信息包括学号、姓名…

公司电脑加密软件——【中科数安】电脑文件资料透明加密,防泄密系统

中科数安电脑文件资料透明加密防泄密系统介绍 中科数安提供的电脑文件资料透明加密防泄密系统&#xff0c;是一款专为企业电脑终端设计的数据安全解决方案。该系统通过采用先进的透明加密技术和精细化的权限管理&#xff0c;旨在全方位保护公司电脑中存储、处理、传输的各类文…

新书速览|Ubuntu Linux运维从零开始学

《Ubuntu Linux运维从零开始学》 本书内容 Ubuntu Linux是目前最流行的Linux操作系统之一。Ubuntu的目标在于为一般用户提供一个最新的、相当稳定的、主要由自由软件构建而成的操作系统。Ubuntu具有庞大的社区力量&#xff0c;用户可以方便地从社区获得帮助。《Ubuntu Linux运…

【分布预测】DistPred:回归与预测的无分布概率推理方法

论文题目&#xff1a;DistPred: A Distribution-Free Probabilistic Inference Method for Regression and Forecasting 论文作者&#xff1a;Daojun Liang, Haixia Zhang&#xff0c;Dongfeng Yuan 论文地址&#xff1a;https://arxiv.org/abs/2406.11397 代码地址&#xff1a…

2024 AI大模型 常问的问题以及答案(附最新的AI大模型面试大厂题 )

前言 在2024年AI大模型的面试中&#xff0c;常问的问题以及答案可能会涵盖多个方面&#xff0c;包括AI大模型的基础知识、训练过程、应用、挑战和前沿趋势等。由于我无法直接附上174题的完整面试题库及其答案&#xff0c;我将基于提供的信息和当前AI大模型领域的热点&#xff…

神经网络模型---ResNet

一、ResNet 1.导入包 import tensorflow as tf from tensorflow.keras import layers, models, datasets, optimizersoptimizers是用于更新模型参数以最小化损失函数的算法 2.加载数据集、归一化、转为独热编码的内容一致 3.增加颜色通道 train_images train_images[...,…

lucene原理

一、正排索引 Lucene的基础层次结构由索引、段、文档、域、词五个部分组成。正向索引的生成即为基于Lucene的基础层次结构一级一级处理文档并分解域存储词的过程。 索引文件层级关系如图1所示&#xff1a; 索引&#xff1a;Lucene索引库包含了搜索文本的所有内容&#xff0…

window端口占用情况及state解析

背景&#xff1a; 在电脑使用过程中&#xff0c;经常会开许多项目&#xff0c;慢慢地发现电脑越来越卡&#xff0c;都不知道到底是在跑什么项目导致&#xff0c;于是就想查看一下电脑到底在跑什么软件和项目&#xff0c;以作记录。 常用命令 netstat -tuln &#xff1a; 使用…

【YOLOv8改进[注意力]】使用CascadedGroupAttention(2023)注意力改进c2f + 含全部代码和详细修改方式 + 手撕结构图

本文将进行在YOLOv8中使用CascadedGroupAttention注意力改进c2f 的实践,助力YOLOv8目标检测效果的实践,文中含全部代码、详细修改方式以及手撕结构图。助您轻松理解改进的方法。 改进前和改进后的参数对比: 目录 一 CascadedGroupAttention 二 使用CascadedGroupAttent…

《Linux运维总结:prometheus+altermanager+webhook-dingtalk配置文件详解》

总结&#xff1a;整理不易&#xff0c;如果对你有帮助&#xff0c;可否点赞关注一下&#xff1f; 更多详细内容请参考&#xff1a;《Linux运维篇&#xff1a;Linux系统运维指南》 一、prometheus配置文件 Prometheus的配置文件是prometheus.yml&#xff0c;在启动时指定相关的…