数据治理:1分钟教你认识和识别主数据

news2025/1/24 5:42:39

​我们讲元数据是企业数据管理的基石,主数据是企业经营运作的主体对象。一般而言,都是从元数据或主数据切入,再逐步展开数据治理的其他领域。企业数据的范围很广而且在不断的增加和演变,哪些数据应该作为主数据加以合理的管理?用什么样的原则和方法去识别主数据?本文主要回答以上这些问题。

01认识主数据

首先,我们要了解什么是主数据,主数据(MD Master Data)指系统间共享数据(例如,客户、供应商、账户和组织部门相关数据)。可以在企业内跨越各个业务部门被重复使用的,通常长期存在且应用于多个系统的数据。

主数据的特征如下:

①高价值:主数据是所有业务处理都离不开的实体数据,与大数据相比价值密度非常高。

②高共享:主数据是跨部门、跨系统高度共享的数据。

③相对稳定:与交易数据相比主数据是相对稳定的,变化频率较低。

主数据具有唯一性、共享性、稳定性、有效性,那主数据与元数据、业务数据有什么区别呢?

主数据与元数据:元数据是描述数据的数据,元数据描述的是数据的属性。而主数据是从元数据中挑选出来的,表征公司业务运行的关键、通用型数据,是一个相对主观的概念。它不仅仅只是表头信息,而是包括实例数据。

主数据与业务数据:业务数据是由企业业务运转产生的数据;这类数据一般会实时更新变化。主数据相对于业务数据而言,属性相对稳定,准确度要求更高,并且具有唯一识别性。

02识别主数据

我们了解了主数据的定义之后,那么企业运行过程中,哪些数据可以称之为主数据呢?

我们通过举例来进行说明。现有5个业务系统,财务系统、OA协同办公系统、CRM采购系统、资金预算系统、人力资源系统。那么5个业务系统都会有不同的人员使用,每一个人员又都分布在各自的公司和部门中,那么人员、部门、公司是不是就具备系统间高度共享的特征?同时基于这些人员、部门、公司所产生的业务、业绩是公司运营的最终目的,那么他们是不是又具备了高价值的实体数据的特点?再看人员正常流动的速度和公司订单产生的速度相比,是不是具备了相对稳定的第三个特征?同时满足了以上3个特征,那么人员、部门、公司不就是主数据嘛!

咱们再举一个采购设备的例子,场景是公司要向一个供应商采购一批计算机硬件,咱们来简单分析一下这个业务流程。首先,咱们在资金预算系统里面输入设备的信息,查看有多少的资金预算可以采用。然后,咱们登录到OA协同办公系统,提交采购这批设备的申请流程,这里涉及了2个主数据,人员和设备。这里缺乏权威主数据就会暴露以下这些问题:

首先办理人在OA系统和资金预算系统的标识符是否一致?如果只是名称一致,而唯一标识符不一致,那么在OA系统和资金预算系统数据关联的时候是否就无法直接关联,需要通过映射关联。同样,如果设备只是名称相似,甚至名称都有区别,那么在提交采购申请的时候,领导看到的设备是不是你想采购的设备呢?你想采购设备A,老板看成了B,M部门有张三,N部门也有张三,你是N部门的张三,如果没有唯一标识符进行确认,领导怎么知道你是M部门的还是N部门的?

假如以上流程都通过人工协调解决了,下一步,需要在采购系统录入采购设备信息和设备供应商进行采购申请。然后登录财务系统,提交设备付款申请。这个流程除了设备主数据以外,供应商主数据是否也会在采购系统和财务系统面临着同样的问题即两边的供应商是否是同一个,名称和社会统一信用代码是否是一致的?

所以人员、部门、公司、设备、工商等主数据的建设在以上种种情景下就显得尤为重要了。

03哪些数据作为主数据进行管理

在决定是否应将特定信息元素视为主数据时,建议综合考虑以下这些标准:

1、数据的行为

通过本数据与其他数据交互的行为,来决定本数据是否是主数据。

在业务运营系统中,主数据几乎总是与运营数据有关。客户购买产品,供应商出售零件,合作伙伴将一箱材料运送到某个地点,员工与其经理有层次关系,经理通过经理(另一名员工)向上报告。

主数据和运营数据之间的关系可以从根本上被视为一种名词/动词关系。运营数据就是动词,例如销售、交付、购买、退货,而主数据就是名词,例如产品、客户、材料等。

2、数据的生命周期

主数据都是可以通过创建、读取、更新、删除的方式来描述,此生命周期称为 CRUD 周期。

但是对于不同公司而言,主数据的CRUD的方式是不同的。

例如:如何创建客户取决于公司的业务规则、行业细分和系统功能。一家公司可能有多个客户创建的渠道,如通过网站、通过客户代表或通过门店。另一家公司可能只允许呼叫中心创建客户。

3、数据的基数

随着基数的减少,一个信息元素被视为主数据的可能性也会降低,即使这是一个普遍被认为应该是主数据的领域,比如客户——

如果一家公司只有3个客户,那么该公司很可能不会考虑这些客户信息视为主数据——至少在使用 MDM 解决方案时不会考虑,这是因为使用主数据基础架构管理这些客户没有任何好处。

基数不会改变信息元素的分类。但是,随着信息元素的基数增加,为之配套管理方案的重要性也随之增加。

4、数据的稳定性

主数据的稳定性往往高于运营类数据。随着它变得更加不稳定,它通常被认为更具运营性。

例如,有些人可能会认为“合同”是主数据元素,也有人可能会认为这是一笔运营数据。

根据合同的有效期,它可以采用任何一种方式。

运动员经纪机构可能会考虑他们的合同是主数据。在这种情况下,每份合同都不同于另一个,并且通常具有超过一年的寿命,运动员往往在任何特定时间都有一份以上的合同:一份与他们的团队签订,另一份与公司签订产品代言合同。随着每份合同的要素重新谈判或运动员被交易,该机构将需要随着时间的推移管理所有这些合同。

其他合同——例如汽车清洗合同或房屋粉刷合同——更像是一笔交易。它们是一次性的、短期的协议,用于提供支付服务,通常会在数小时内完成并失效。

5、数据的复杂度

简单的数据,即使它们是有价值的实体,也很少难以管理,所以也很少被视为主数据元素。通常,这些资产被简单地收集和统计。

例如,银行可能不会跟踪它存储的每根金条的信息,而只会记录它们的数量。每根金条价值可观,基数高,寿命长,但复杂度低。

6、数据的可复用性

主数据管理的主要驱动力之一就是复用。由于多种原因,主数据并不总是可以被访问的,人们将主数据存储在不同的位置,例如电子表格或者各系统的数据库。但是,如果一个主数据实体在多个系统中重复使用,那么肯定需要对其进行管理。

7、数据的价值

数据元素对公司越有价值,它就越有可能被视为主数据元素。

如上方法是识别信息元素是否需要纳入主数据进行管理的常用标准。希望能够对读者有所帮助。

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/413785.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【JSON学习笔记】1.JSON 简介及语法

前言 本章介绍JSON及其语法。 JSON 教程 JSON: JavaScript Object Notation(JavaScript 对象表示法) JSON 是存储和交换文本信息的语法,类似 XML。 JSON 比 XML 更小、更快,更易解析。 JSON 易于人阅读和编写。 C、Python、C、Java、PHP、Go等编程…

python机器学习基础——监督学习算法之线性回归

定义 线性模型是在实践中广泛使用的一类模型,几十年来被广泛研究,它可以追溯到一百多年前。线性模型利用输入特征的线性函数 用于回归的线性模型 import mglearn import matplotlib.pyplot as pltmglearn.plots.plot_linear_regression_wave()plt.show…

使用vue实现分页

使用vue实现分页的逻辑并不复杂,接收后端传输过来的数据,然后根据数据的总数和每一页的数据量就可以计算出一共可以分成几页 我编写了一个简单的前端页面用来查询数据,页面一共有几个逻辑 具体的效果可以看下面的演示 下面就来看一下具体的实…

【MyBatis】MyBatis分页插件的使用

文章目录MyBatis分页插件的使用前置知识分页插件的使用MyBatis分页插件的使用 前置知识 MyBatis基础用法。推荐阅读:MyBatis的基本使用 MySQL分页查询: 知道分页查询的规律,同时知道limit index pageSize的使用 index:当前页的起…

【分布式 论文】之 1. MapReduce——Simplified Data Processing on Large Clusters

文章目录1. 需求 / 现存问题2. 总述3. 实现3.1 概述3.2 Master的数据结构3.3 容错性3.3.1 worker节点故障3.3.2 master节点故障3.3.3 故障环境下的语义3.4 位置(Locality)3.5 任务粒度3.6 备份任务4. 对MapReduce的扩展4.1 划分函数4.2 排序保证4.3 聚合…

【Python】网络请求

目录 一、网络请求流程 1.HTTP 2.URL 3.网络传输模型 4.长链接/短链接 二、爬虫基础 1.基础概念 2.发送请求 3.请求模式 4.cookie 5.retrying 一、网络请求流程 1.HTTP 用户输入网址,例如 www.baidu.com浏览器先向DNS请求,找到网址域名对应的…

【Linux】网络层 — IP协议

🎇Linux: 博客主页:一起去看日落吗分享博主的在Linux中学习到的知识和遇到的问题博主的能力有限,出现错误希望大家不吝赐教分享给大家一句我很喜欢的话: 看似不起波澜的日复一日,一定会在某一天让你看见坚持…

html页面在其他浏览器中渲染不出来

参考文章 问题 Vs code软件中live sever插件设置默认的浏览器是360浏览器,所以一直以来页面都是默认在360浏览器上进行打开并且没有问题。 后面想换谷歌浏览器打开html页面看下效果,发现图表和数据渲染不出来: 报错信息: 用js…

想制作出专业水准的音视频?掌握H.264编码技巧是关键

H.264编码原理 H.264,也被称为先进视频编码(AVC),是目前最流行的视频编码标准之一,其压缩效率很高。H.264编码基于视频编码的原始数据,使用一系列算法和技术以更小的比特率呈现更高质量的视频。以下是H.26…

【SSM】Spring6(十一.Spring对事务支持)

文章目录1.引入事务场景1.1准备数据库1.2 创建包结构1.3 创建POJO类1.4 编写持久层1.5 编写业务层1.6 Spring配置文件1.7 表示层(测试)1.8 模拟异常2.Spring对事务的支持2.1 spring事务管理API2.2 spring事务之注解方式2.3 事务的属性2.4 事务的传播行为…

春季儿童吃什么有助于长高,3款适合孩子长高的食谱做法,学起来

儿童身高一直以来都比较受到父母的关注,虽然身高不能说明一个人的能力有多强,但是会影响到人的外表。身高影响成败,一些专业对身高要求非常严格,因此大部分家长都希望孩子在身高方面能有一定的优势。 春季是孩子分泌生长激素增加时…

一位27岁软件测试员,测试在职近5年,月薪不到2W,担心被应届生取代

工作了近5年,一个月工资不到20K,担心被应届毕业生取代!互联网的快速发展伴随着员工适者生存的加速,测试员的薪资也在不断增长,以3年、5年、8年为一条分水岭。如果人们的能力和体力不够,他们就会被淘汰。看起…

【JavaEE】多线程CAS中的aba问题是什么?

博主简介:想进大厂的打工人博主主页:xyk:所属专栏: JavaEE初阶什么是CAS问题?CAS: 全称Compare and swap,字面意思:”比较并交换“,CAS中的aba问题是什么?请看本文讲解~~ 目录 文章目录 一、CAS是什么&am…

2023二建学天案例突破101问

2023 年二级建造师《公路》案例 101 问1.哪些情况下应进行长度宜不小于 200m的试验路段施工。(1)二级及二级以上公路路堤。(2)填石路堤、土石路堤;(3)特殊填料路堤;(4)特殊路基;(5)拟采用新技术、新工艺、新材料,新设备的路系。2.石质路暂的开挖方式有哪些!(1)钻爆开…

【笔记】响应表头中的Content-disposition

问题来源: 今天在做关于 怎样不通过使用插件的方式在HTML上预览本地C盘下的PDF文件,在生成PDF文件到C盘后,我想在下载和生成之间,再加一个PDF预览,就是先生成到C盘,再由用户来预览之后再决定是否下载&…

ModelNet40数据集

跑PointNet,modelnet40数据集时; 有些人直接用.off文件;——【CAD模型】普林斯顿形状Banchmark中的.off文件遵循以下标准: OFF文件全是以OFF关键字开始的ASCII文件。下一行说明顶点的数量、面片的数量、边的数量。 边的数量可以安全地省略。对模型不会有影响(可以为…

4/16学习周报

文章目录前言文献阅读摘要简介方法评估标准结果结论时间序列预测支持向量机SVM高斯过程GPRNNLSTMGRUtransformer总结前言 本周阅读文献《Real-time probabilistic forecasting of river water quality under data missing situation: Deep learning plus post-processing tech…

环境变量概念详解!(4千字长文)

环境变量! 文章目录环境变量!环境变量PATHexportexport的错误用法定义命令行变量环境变量哪里来的其他各种环境变量HOMEHOSTNAMELOGNAMEHISTSIZEPWD环境变量相关指令echoenvgetenv——相关函数!exportsetunset命令行参数argcargvenvpenvironp…

stata绘图指令

stata绘图指令 – 潘登同学的stata笔记 文章目录stata绘图指令 -- 潘登同学的stata笔记绘图概览韦恩图折线图连线图线性拟合图直方图函数图添加特殊字符和文字绘图概览 Stata 提供的图形种类: twoway 二维图scatter 散点图line 折线图area 区域图lfit 线性拟合图q…

漏洞扫描工具AWVS的安装及配置使用过程

简介 Acunetix Web Vulnerability Scanner(AWVS)可以扫描任何通过Web浏览器访问和遵循HTTP/HTTPS规则的Web站点。适用于任何中小型和大型企业的内联网、外延网和面向客户、雇员、厂商和其它人员的Web网站。 AWVS可以通过检查SQL注入攻击漏洞、XSS跨站脚…