洞见优维「全面可观测」:从85%的AI项目败率说起

news2024/11/15 12:35:12

图片

一直以来,优维都坚信AI有潜力改变运维行业并促进创新,这是我们的A面。但从行业和客户那里,我们所看到的B面也不容忽视。

自从去年底发布优维全面可观测以来(点击回顾),我们的团队在服务客户的进程中常常感慨:对于企业IT运维业务来说,AI项目是一个恒定的光源,但失败是企业追逐光源投下来的阴影——当你离光源越近,阴影面积也会越大——AI部署之路步履维艰,这在很长时间内让很多组织对AI项目的失败耿耿于怀。 

图片

根据Gartner的一份报告,在企业所部署的AI项目中,失败率高达85%,毫不夸张地说,这一令人发指的数据是近两年企业在做AI项目的部署决策时最大的心理屏障之一。从行业愈发普遍的讨论结果来看,造成这一高失败率的因素有很多,包括数据质量差、缺乏相关数据以及对AI的功能和要求了解不足等等,不一而足。

图片

但优维更关心的是,这些问题的存在,其实凸显了强大的数据管理和精确的战略规划对于AI项目(包括基于云的模型和 LLM)的重要性。这种重要性常常在优维内部作为重点关照的对象被反复讨论,以至于成为优维全面可观测需要“集中力量办大事”的核心目标。

图片

数据是AI和机器学习 (ML) 项目的命脉。

如果没有可靠的数据,AI模型就很难产生准确可靠的结果。

优维团队曾在今年上半年发起过一项针对客户群体的“田野调查”,从得到的反馈看,“数据”这一问题高频凸显——超过90%的IT高管认为数据是成功实施AI项目的最大障碍。

如果你觉得优维的调查不那么具备权威性和说服力,那么无独有偶,国外机构Vanson Bourne的一项专业调查结果或许更让你大跌眼镜——调查报告显示,99%的人工智能和机器学习项目都遇到了数据质量问题。这些统计数据凸显了对有效数据管理和监控解决方案的迫切需求。

图片

图片

优维的全面可观测有7大核心场景:架构可观测、故障可观测、变更可观测、用户可观测、应用服务可观测、资源可观测、运维状态可观测,但我们通常不将数据可观测性直接归类于其中的任何一个特定类目,但它与所有这些类目都有交集。数据可观测性主要关注于数据的健康、质量和完整性,它确保数据在整个“全面可观测”的体系中是可靠和可用的。

图片

数据可观测性是指监控和了解数据系统状态的能力。它涉及跟踪数据管道中的数据质量、沿袭和性能。

组织可以通过监控数据的新鲜度、数量、分布、模式和沿袭来确保AI项目的成功。优维全面可观测提供强大的数据可观测性能力,旨在显著提高AI项目的成功率,例如:

图片

图片

但是,我们不能仅仅停留在数据可观测性上。如前所述,数据并不是AI项目失败的唯一原因。对AI的能力和要求理解不足也是其中的一部分。

AI可观测性涉及监控和理解AI模型和系统,以确保它们在实际应用中按预期运行。它包括:

▎性能监控:

   跟踪准确度、精确度、召回率和token消耗等指标。

可解释性:

   了解模型如何做出决策以确保透明度和可解释性。

漂移检测:

   识别模型性能的变化,表明准确性或相关性存在问题。

对此我们让设计师做了一张图,用于展示AI可观测性如何检测和解决AI模型性能下降的问题:

图片

图片

数据和AI可观测性协同工作,提供系统的整体视图,数据可观测性专注于管道和基础设施,而AI可观测性则深入研究模型的性能和结果。这就是优维全面可观测的深层产品逻辑。

  反馈机制

有效的AI可观测性依赖于反馈回路,而反馈回路又依赖于数据可观测性。例如,识别数据漂移需要对数据管道及其沿袭有深刻的理解。

  快速解决问题

AI性能差异的根源通常在于数据管道中的问题。数据可观测性有助于追踪这些问题的根源,从而快速识别和解决影响AI系统的问题。

  合规与治理保证

确保遵守法规和治理标准至关重要。数据可观测性确保数据管理符合行业标准,而AI可观测性确保模型遵守道德准则和法规。

图片

自从2023年四季度落地以来,优维全面可观测已经在市场上为客户披荆斩棘整整3个季度了,在这期间,我们的产品矩阵为客户的运维组织提供了颇为可观的数据和AI可观测性工具,与此同时,随着优维首个运维大模型Murphy的上线(点击回顾),也让优维全面可观测展现出了更多维的价值。

通过提供对数据系统和AI模型的全面监控和理解,优维全面可观测可确保AI项目基于高质量数据,并确保AI模型在实际应用中可靠且透明地运行。现在,帮助客户构建可持续的AI应用已经显得不那么棘手。

图片

- end -

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1995017.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

国内下载gradle慢,下载gradle超时问题解决【笔记】

下载gradle超时、慢 修改 找到项目中的gradle-wrapper.properties文件 修改 替换默认下载链接地址 distributionUrlhttps\://services.gradle.org/distributions替换为腾讯或阿里的链接地址 厂商链接阿里https://mirrors.aliyun.com/macports/distfiles/gradle腾讯https://…

vue请求springboot接口下载zip文件

说明 其实只需要按照普通文件流下载即可&#xff0c;以下是一个例子&#xff0c;仅供参考。 springboot接口 RestController RequestMapping("/api/files") public class FileController {GetMapping("/download")public ResponseEntity<Resource>…

C++ 多态三

1.多态的概念 多态的前提的是继承。当不同的对象去完成同一种行为时会产生不同的结果就是多态的通俗意义。 例如学生、成人两个对象去完成买票这个行为&#xff0c;那么学生的结果是获得半价&#xff0c;而成人获得的结果的是全价。 2.多态的定义及实现 2.1构成多态的两个硬…

自闭症学校排名前十,揭秘顶级干预学校

在当今社会&#xff0c;自闭症儿童的数量不断上升&#xff0c;众多家庭都在全力以赴地为孩子寻找适宜的自闭症学校。当面临这一重要抉择时&#xff0c;家长们常常首先想到的便是查看自闭症学校排名前十的榜单。然而&#xff0c;网络上此类排名繁多&#xff0c;其真实性与可靠性…

国产光耦的工作原理、优势以及应用介绍

国产光耦作为一种关键的电子元件&#xff0c;因其卓越的光隔离特性&#xff0c;被广泛应用于电气隔离和信号隔离领域。其可靠的性能使其在电源管理、数据通信和音频处理等领域发挥重要作用。 国产光耦是由发光二极管&#xff08;LED&#xff09;和光敏器件&#xff08;如光敏晶…

查理三世的假期并不理想 对泰勒·斯威夫特主题舞会引发的骚乱未采取其他行动遭各方批评

当查理三世国王在苏格兰巴尔莫勒尔堡享受一年一度的夏日假期时&#xff0c;英国其他地区却在应对由 7 月 29 日泰勒斯威夫特主题舞会上持刀袭击而引发的骚乱。王室成员在宫殿高墙内休息&#xff0c;而暴力事件却不断增多&#xff0c;这种对比让许多原本忠实的粉丝感到不安。 由…

C# 在Word中插入或删除分节符

在Word中&#xff0c;分节符是一种强大的工具&#xff0c;用于将文档分成不同的部分&#xff0c;每个部分可以有独立的页面设置&#xff0c;如页边距、纸张方向、页眉和页脚等。正确使用分节符可以极大地提升文档的组织性和专业性&#xff0c;特别是在长文档中&#xff0c;需要…

BCrypt加密算法的使用及原理

系列文章目录 1.SpringBoot整合RabbitMQ并实现消息发送与接收 2. 解析JSON格式参数 & 修改对象的key 3. VUE整合Echarts实现简单的数据可视化 4. List&#xff1c;HashMap&#xff1c;String,String&#xff1e;&#xff1e;实现自定义字符串排序&#xff08;key排序、Val…

69、zabbix自动、代理、snmp监控

一、zabbix 1.1、自动发现 [roottest1 ~]# systemctl stop firewalld [roottest1 ~]# setenforce 0 [roottest3 ~]# vim /etc/hosts 192.168.168.21 test1 192.168.168.23 test3 [roottest1 ~]# vim /etc/hosts 192.168.168.21 test1 192.168.168.23 test3 ------------…

AI智能名片B2B2C商城系统:优化三度空间渠道布局与避免渠道冲突的新策略

摘要&#xff1a;在数字化浪潮的推动下&#xff0c;品牌商面临着前所未有的市场挑战与机遇。为了应对这些挑战并抓住机遇&#xff0c;品牌商需要构建并优化一个高效、协同的三度空间&#xff08;线下实体店、线上电商平台、数字营销渠道&#xff09;渠道布局。本文深入探讨了AI…

【多线程-从零开始-玖】内核态,用户态,线程池的参数、使用方法详解

文章目录 1. 为什么会有线程池2. 内核态和用户态2.1 场景构造 3. 标准库的线程池3.1 构造方法的参数3.1.1 核心线程数和最大线程数3.1.2 非核心线程允许摸鱼的最大时间3.1.3 工作队列&#xff08;阻塞队列&#xff09;3.1.4 线程工厂工厂设计模式 3.1.5 拒绝策略四种拒绝策略 3…

极投影ax.contourf

我想用极投影画个类似下面这样的效果图&#xff0c;首先底图是一个这样的&#xff0c;然后再有需要的地方做标记&#xff0c;比如斜线和渔网状的东西。 但是我怎么尝试都是得到了一个下面这样的图这样肯定有问题 我调整为画轮廓线之后变成下面这样的图&#xff0c;我猜想应该是…

Python酷库之旅-第三方库Pandas(073)

目录 一、用法精讲 296、pandas.Series.dt.as_unit方法 296-1、语法 296-2、参数 296-3、功能 296-4、返回值 296-5、说明 296-6、用法 296-6-1、数据准备 296-6-2、代码示例 296-6-3、结果输出 297、pandas.Series.dt.days属性 297-1、语法 297-2、参数 297-3、…

Ansys Mechanical|解决温度场-电场耦合问题

一.多物理场耦合分析的必要性 你是否曾经碰到过你的模型受到两个或者更多物理因素影响的情况吗&#xff1f;这些物理因素不仅会相互影响&#xff0c;还会影响计算结果。 这时多物理场分析就有用了。在解决多物理场影响的工程问题时&#xff0c;多物理场耦合分析是必要的。 举…

IO进程----标准IO

目录 IO进程 标准IO 1. 概念&#xff1a; 2. 特点&#xff1a; 3. 缓存区 3.1. 行缓存&#xff1a;和终端操作相关 刷新缓存的条件&#xff1a; 1) 程序正常退出 2) \n刷新 3) 缓存区满刷新 4) 强制刷新 fflush 3.2. 全缓存&#xff1a;和文件操作相关 3.…

【C++】模版详解

1、概念 C模版分两类&#xff1a;函数模版和类模版 1&#xff09;函数模板的格式 template <class 形参名&#xff0c;class 形参名&#xff0c;......> 返回类型 函数名(参数列表) {函数体 }例如&#xff1a; template <class T> void swap(T& a, T& b…

android13 关闭selinux 临时关闭或者永久关闭

总纲 android13 rom 开发总纲说明 目录 1.前言 2.情况分析 2.1 临时关闭 2.2 永久关闭 3.修改方法 3.1 临时修改 3.2 永久关闭 4.编译测试 5.彩蛋 1.前言 在Android操作系统中,SELinux(Security-Enhanced Linux)是一种安全模块,用于提供强制访问控制(MAC)安全…

为什么不用postman做自动化

面试的时候被问到&#xff1a;为什么不用postman做自动化 打开postman&#xff0c;看到用例集管理、API 管理、环境管理这三个功能&#xff0c;用户体验感算得上品牌等级了 为什么不用呢&#xff0c;文心一言给了一些答案 不适合大规模自动化测试&#xff1a;Postman 主要是为…

AI大模型排行榜(gpt-4o-2024-08-06)

https://github.com/yuchenlin/ZeroEval/blob/main/result_dirs/mmlu-redux.summary.md 人工智能学习网站 https://chat.xutongbao.top

学习日志8.8--防火墙精细化策略管控

本次实验的拓扑结构&#xff0c;用PC2去模拟和外部网络连接的Internet。 在trust和untrust区域上&#xff0c;希望将防火墙安全策略的默认动作修改为deny&#xff0c;然后精细化控制流量的访问&#xff0c;从trust到untrust控制只允许192.168.1.0的网络通过&#xff0c;从untr…