KaiwuDB 数据服务平台 1.0 产品详解

news2024/11/17 5:41:23

大家好,今天我分享的是 KaiwuDB 数据服务平台(KDP),一款由我们独立自主研发,以 KaiwuDB 为核心的数据服务产品。

KDP 产品建设目标是实现数据的云边端的一体化治理,提供一套完整的全生命周期服务。接下来我将围绕时代背景、时序数据新解法及功能展示 3 大维度展开详细介绍。

01

数字时代下的机遇与挑战

当前,我国数字经济发展已进入到快车道,数字经济产业不断壮大,为各大行业企业创造了转型和发展的机遇。

物联网概念起源于 1999 年,5G 的正式商用进一步推动了物联网的高速发展,在物联网背景下,数据信息的价值将被进一步放大。据公开数据分析,我国物联网市场规模会由 1.7 万亿增长到 2.6 万亿,5 年复合增长率达 9%。同时,中国企业级市场规模在未来几年也将继续保持着全球最大的物联网市场体量。

物联网产生源源不断的时序数据,在这里将出现第 1 个挑战:如何收集、处理、储存海量的时序数据?

我们先一起来看看时序数据的处理过程,从数据诞生到分析决策共经历 6 大环节:数据收集、数据清洗、数据存储、数据管理 4 个环节约占全流程的 80%;初始数据分析和数据可视化仅占全流程约 20%。

在占比最多的 4 个流程中,普遍会遇到以下问题:

  • 物联网协议多种多样,数据难以聚合;

  • 由于业务原因数据分散在各大系统;

  • 数据时效性差,需临时调用人力进行数据分发;

  • 数据格式、颗粒度各异导致数据质量低;

  • 数据的复用性差,按照需求处理的数据仅能应对某些场景。

说到这里,前面提到的挑战难度也不可避免地增大—如何及时且快速地收集、处理、存储海量数据!

业内伙伴会选择通过大数据强大的计算能力和 BI 可视化能力实现数据即时分析,企业通常会将开源的 Kafka、Redis、Hbase、Hadoop、Spark 等大数据软件组合使用,利用集群能力处理海量数据。

但是,也将不可避免地带来很多问题:首先,多系统开发语言和工具不一致导致联调时间长,进而严重影响整体开发效率;其次,多系统运维后台相互独立,加重运维团队负担;此外,数据在多套系统中的传输,由于处理方案的限制,运行效率较低。这些问题都将拖慢整体应用推向市场的节奏。

02

有更加符合物联网特征的解决方案吗?

答案是肯定的。

为此,我们推出了 “KaiwuDB+KDP”的解决方案,致力于解决数据流程中的收集、清洗、存储、管理、初始数据分析及数据可视化全流程的痛点。

我们的建设理念是帮助企业快速成建设“业务即数据,数据即服务”的方案。

  • 顶层:助力物联网企业发展,加速生态迭代;

  • 中层:实现物理设备双向通信,既能集成数据,又能下发指令,向上提供高效实时数据服务,真正打通数据源端到企业管理端的数据流;

  • 底座:支撑数据和主流数据源的实时/离线汇入,联合 KaiwuDB 提供一站式的实时数据解决方案。

KDP 以 KaiwuDB 为核心,聚焦工业物联网、数字能源、交通车联网、智慧产业等领域,搭建具备高速数据集成构建特性的行业级物联网实时信息融合平台。

为帮助大家加深理解,这里提炼四个关键词来展开详细介绍:

“高速”:集成高速、运算高速、页面响应高速,满足用户对高性能需求;

“集成”:实时接入、离线接入、多源集成、多模数据集成,满足用户对多源异构数据的集成管理需求;

“构建”:提供实时分析、流式计算、数据模型处理、数据可视化等功能,为用户提供数据消费的各种基础能力;

“行业级”:我们会针对目标行业持续推出一系列模型与方案,包括通用的分析方案与定制化方案。

如图是 KDP 产品架构,从数据采集、清洗、存储、管理、可视化全流程都可在 KDP 完成。数据来源支持数据库、Kafka、Excel等,经过缓存、数据管道写入到 KaiwuDB 中,此外提供了完备工具监控以上流程,最终在 KDP 以可视化形式进行结果展示。

03

KDP 究竟能带来什么样的价值?

结合当下现状,这里为大家展示 KDP 的 5 大核心亮点功能:

亮点 1:围绕用户使用场景,我们展开了详尽的需求分析,保证用户开箱即用,大幅降低学习成本;

亮点 2:低代码构建数据 BI 分析,支持自主报表分析,非专业开发人员也可上手操作,降低使用负担;

亮点 3:支持向前追溯,多维度、多层次的深度探索,配合 KaiwuDB 的强大算力,满足用户日常分析需求;

亮点 4:丰富的数据共享,支持用户二次开发,开放丰富 API 满足用户的更多延展需求;

亮点 5:支持多层次安全访问控制,支持系统级、页面级;数据能够控制到行级、列级,提供全套安全访问控制机制。

产品需要能为用户创造价值,这也是我们最关心的问题。KDP 围绕着用户的需求,深度打磨覆盖从数据源端再到数据消费端的全链路的场景,致力于为用户提供更多实用价值:

  • 支持多样的数据源,屏蔽下层的数据收集的复杂度;

  • 消除数据孤岛,数据统一管理治理;

  • 盘活数据,增加数据活力,将数据转化为数据资;

  • 安全多样的数据共享,提升数据分享能力;

全链路数据服务方案,加速上层的数据建设。

04

未来的 KDP...

未来,我们将不断完善产品的功能,分阶段打造 IoT 数据服务平台,实现物联网设备的双向通信,提供多种 AI 模型以及行业模板,覆盖全链路的数据解决方案

接下来的一年,大家还会看到我们更丰富的功能上新,更全面的物联网设备接入,更优质的开放服务,更全面地覆盖企业的通用及个性化需求。

另外,我们还将提供基于 AI 的异常检测、预测分析功能来满足企业对实时数据的预测需求;提供全面的数据监控、集群监控,及可视化工具分析模板,覆盖云边端场景的实时数据分析,增强平台安全能力。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/173343.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

2.5、线程概念和多线程模型

整体框架 1、什么是线程,为什么要引入线程? 还没有引入进程之前,各个程序只能串行执行 进程是程序的一次执行过程,但这些功能显然不可能是由一个程序顺序处理就能实现的 有的进程可能需要 “同时” 做很多事,而传统的…

伯俊ERP与金蝶云星空对接集成连通应收单新增

伯俊ERP与金蝶云星空对接集成表头表体组合查询连通应收单新增(应收单-标准应收单(KD应收单销售退)数据源系统:伯俊ERP未来,伯俊科技也会砥砺前行,不断为品牌提供更全面的零售终端致胜利器。伯俊科技始终坚持创新发展,探索大零售行…

【IDEA】自动部署SpringBoot Jar包到远程服务器并通过脚本启动jar

【IDEA】自动部署SpringBoot Jar包到远程服务器并通过脚本启动jar 文章目录 前言一.Deployment使用二.ssh使用三.启动脚本 前言 IDEA版本: 2019.3 一.Deployment使用 IDRA原生的Deployment不需要离开idea就可以直接将项目部署到远程运行,同时拥有远程视图窗口…

高并发系统设计 --计数服务抽离

传统计数 模糊计数 Cache DB。写Cache,批量刷新DB。 有一个写请求,我们就写cache,写一个在cache中1,buffer记一个,差不多(buffer满了,时间到了)写一次DB,丢数据也就丢…

JVM快速入门学习笔记(二)

临近过年,事太多,学习效率也好低,最近已经好久没搞学习了,发篇简单的学习笔记意思下吧 5. 沙箱安全机制 Java安全模型的核心就是Java沙箱(sandbox),什么是沙箱?沙箱是一个限制程序运…

Oracle 12c多租户特性详解:从Schema到PDB的变化与隔离

CDB和PDB的职责分离一些数据库管理员管理整个CDB,而另一些管理员管理单个的pdb。.管理整个CDB的dba作为普通用户连接到CDB,管理整个CDB和根的属性,以及pdb的一些属性。例如,这些dba可以创建、拔出、插入和删除pdb。它们还可以为根…

【c语言】文件操作详解

主页:114514的代码大冒险 qq:2188956112(欢迎小伙伴呀hi✿(。◕ᴗ◕。)✿ ) Gitee:庄嘉豪 (zhuang-jiahaoxxx) - Gitee.com 目录 前言 一、文件是什么 二、文件的打开和关闭 1.文件指针 2.文件的打开和关闭 三,文件的顺…

《计算机体系结构量化研究方法》 B.4 虚拟存储器 笔记

B.4 虚拟存储器 一、基本概念 1、虚拟存储器把物理存储器划分成块以后分配给不同的进程;采用一种保护机制来限制各个进程,使其仅能访问属于自己的块。 2、重定位机制允许同一程序在物理存储器中的任意位置运行。 3、页和段用于块,缺页错误…

SSM框架整合入门案例

文章目录SSM整合案例1,SSM整合1.1 流程分析1.2 整合配置步骤1:创建Maven的web项目步骤2:添加依赖步骤3:创建项目包结构步骤4:创建SpringConfig配置类步骤5:创建JdbcConfig配置类步骤6:创建MybatisConfig配置类步骤7:创建jdbc.properties步骤8:创建Spring…

《Buildozer打包实战指南》第七节 常见的打包问题

目录 无法访问xxx网址,连接超时 目标路径xxx已经存在,并且不是一个空目录 每次打包时间都要很久 待更新 在打包过程中难免会碰到一些问题,在本节,笔者会把自己碰到的一些问题的解决方案写出来,好让读者节省时间。 …

KaiwuDB CTO 魏可伟:1.0 时序数据库技术解读

大家好,首先非常感谢大家参与本次 KaiwuDB 1.0 系列产品发布会。作为国内数据库新生品牌力量,KaiwuDB 是浪潮集团控股的数据库企业,我们聚焦在工业物联网、数字能源、交通车联网、智慧产业等快速发展的重要领域,希望为各大行业客户…

06技术太卷我学APEX-技术太卷我学APEX

06技术太卷我学APEX-技术太卷我学APEX 0 概述 自学APEX第7天,用APEX做了一个自学的笔记APP,名称就叫《技术太卷我学APEX》 1 登录页面 登录页面设置:就改了下名称和加上了测试账号。 登录页面效果: 这个是 APEX功能页面之一…

前端面试题合集-第一篇

前端面试题合集-第一篇 🔔每周不定时更新! ⛄️不要让自己失去竞争力! ☀️哪里都不是避风港,保持竞争力! 1. CSS选择器的优先级 !important>内联>id选择器>类选择器>标签选择器>通配符选择器>继承 在同一…

Java IO流补充 - Properties - IO流框架commons-io

文章目录IO流补充知识Properties结合IO流集合IO流框架IO流补充知识 Properties结合IO流集合 我们先来认识Properties属性集对象 Properties其实就是一个Map集合,但是我们一般不会当集合使用,因为HashMap更好用。 Properties核心作用: 属性文件&#xf…

设计模式_行为型模式 -《观察者模式》

设计模式_行为型模式 -《观察者模式》 笔记整理自 黑马程序员Java设计模式详解, 23种Java设计模式(图解框架源码分析实战) 概述 定义 观察者模式,又被称为发布-订阅(Publish / Subscribe)模式&#xff0c…

RSA与证书

这篇文章详细讲述一下RSA与证书的相关内容。内容有点多,但都是干货。 一、RSA算法 1.1简介 RSA算法是由美国三位科学家Rivest、Shamir和Adleman于1976年提出并在1978年正式发表的公开密码算 法,其命名取自三位创始人名字的首字母缩写。该算法基于数论…

CSS 计数器

CSS 计数器 CSS 计数器可让你根据内容在文档中的位置调整其显示的外观。例如,你可以使用计数器自动为网页中的标题编号,或者更改有序列表的编号。 本质上 CSS 计数器是由 CSS 维护的变量,这些变量可能根据 CSS 规则跟踪使用次数以递增或递减…

【Git】利用 GIT 做版本控制

目录 写在前面 备份方法 效果展示 写在前面 在做项目开发时,不免需要进行版本更替或者使增加新功能等,这时很重要的环节是对版本进行备份,以便在新版本开发过程中出现问题,而当工程文件过大时,在对文件备份时需要占…

Java——多线程01(创建和启动,优先级调度,守护线程,出让/礼让线程,插队/插入线程)

目录1.多线程的创建和启动方式1.线程第一种启动方式(继承Thread类)2.多线程的第二种启动方式实现Runnable接口3.多线程的第三种启动方式实现Callable接口2.Thread多线程中的方法1.getName(), setName(),currentThread(),sleep2.Thread优先级调度方法3.守…

【手把手教你学会51单片机】数码管的动态显示

注:本文章转载自《手把手教你学习51单片机》!因转载需要原文链接,故无法选择转载! 如若侵权,请联系我进行删除!上传至网络博客目的为了记录自己学习的过程的同时,同时能够帮助其他一同学习的小伙…