业务数据治理体系化实施流程学习总结

news2025/1/19 17:10:54

目录

一、业务数据治理实施流程

步骤 1:发现问题和制定目标

步骤 2:针对问题进行拆解,设计可衡量的指标

步骤 3:制定解决SOP和检查研发标准规范

步骤 4:推广运营,以拿结果为核心目标

步骤 5:总结沉淀方法论,迭代认知

二、治理体系化思考

(一)治理体系化定义分析

(二)建设思路与体系框架

建设思路

体系框架

体系框架建设

(三)体系框架落地实施方案

三、治理体系化实践:标准化

四、治理体系化实践:数字化

五、治理体系化实践:系统化

六、思考

参考文章和链接


一、业务数据治理实施流程

数据治理的实施流程是一个基于业务数据治理标准框架的标准化操作流程,用于解决具体数据问题。

步骤 1:发现问题和制定目标

在这一步骤中,业务数据治理团队需要以业务数据开发团队的视角出发,从服务业务、遵守数据研发规范和收集用户反馈的角度,全面发现和收集相关需要解决的问题。同时,制定的目标应具备可实现性,确保它们是可量化和可测量的。这一过程可能包括:

  • 与业务团队密切合作,了解他们的需求和挑战。
  • 定期收集用户反馈和建议。
  • 确保目标与组织整体战略一致。

步骤 2:针对问题进行拆解,设计可衡量的指标

一旦问题被确定,团队需要对问题进行详细的拆解,设计可衡量的指标。通过元数据的采集建设,实现对这些指标的监控和度量。这一过程可能包括:

  • 对问题进行分解,识别关键的度量维度。
  • 建立元数据框架,确保数据可追溯和可靠。
  • 设计可衡量进度和成功的指标。

步骤 3:制定解决SOP和检查研发标准规范

对于衡量出的具体问题,制定相关的解决SOP(标准操作流程),并检查相应的研发标准规范是否完善。通过事前、事中、事后三个阶段,建设或完善相应的工具化解决问题的能力。这一过程可能包括:

  • 制定详细的解决问题的标准操作流程(SOP)。
  • 检查并更新研发标准规范,确保其与问题的解决方案一致。
  • 引入工具和技术,以支持问题的识别和解决。

步骤 4:推广运营,以拿结果为核心目标

这一步骤的核心目标是推广运营,确保实施过程中取得可衡量的结果。根据问题的重要程度,制定规划,关注解决过程是否与用户利益发生冲突,控制好节奏。这一过程可能包括:

  • 制定推广运营计划,确保解决方案得到广泛采纳。
  • 针对不同角色采用差异化的策略,确保整个团队的协同作战。
  • 监控解决过程,及时调整和优化方案。

步骤 5:总结沉淀方法论,迭代认知

最后一步是总结并沉淀方法论,通过迭代认知,持续探索问题的最优解,优化治理方案和能力。这一过程可能包括:

  • 汇总实施过程中的经验教训,形成治理的最佳实践。
  • 迭代认知,不断优化流程和工具。
  • 持续培训和发展团队成员,确保他们能够适应不断变化的数据治理环境。

通过这一套流程,数据治理团队能够更规范地处理数据问题,确保实施的高质量和可持续性。该流程的总结内容主要学习于业务数据治理体系化思考与实践 - 美团技术团队。

二、治理体系化思考

数据治理是一个极为复杂的综合性问题。唯有构建一套标准的业务数据治理体系,才能确保数据治理在各个环节如现状评估、目标制定、流程规范建设、治理监控管理、能力建设、执行效率、效果评价等方面有效地落地。

通过构建这样一套业务数据治理体系,我们可以更全面、系统地应对不同业务生命周期阶段的挑战,确保数据治理的有效性和可持续性。这种体系化思考将有助于建立一个更加健壮和灵活的数据治理框架,使其能够适应不断变化的业务和技术环境。

(一)治理体系化定义分析

数据治理体系化是指在数据管理和治理领域建立一套系统性、全面的组织和操作体系,包括管理体系、方法体系、评价体系、标准体系、工具体系等核心要素。其目标是持续为数据治理实施提供支持,类似于电商公司搭建销售、产品、供给、物流、人力等体系以服务用户的过程。

(二)建设思路与体系框架

建设思路

以团队数据治理目标为核心导向,设计实现目标需要的相关能力组合,并根据组织要求,实施过程的问题反馈,持续不断地迭代完善,最终实现数据治理的愿景。

体系框架

  • 管理层: 制定组织保障流程规范、职责设计、奖惩措施,确保数据治理的顺利启动和运转。

  • 标准层: 设定各类研发标准规范、解决方案标准SOP,为数据治理提供技术规范和事前解决方案的依据,降低数据故障问题发生量。

  • 能力层: 完善数字化的基于元数据的问题度量能力,以及问题工具化检测和解决的系统化能力,为数据治理实施提供科学性、高质量和高效率的支持。

  • 执行层: 设定动作,根据具体目标对各治理域问题进行事前约束、事中监控、事后治理,确保目标的全面性和深度达成。

  • 评价层: 基于指标的问题监控、健康度评价体系和专项评估报告,评价治理收益及效果,是推进治理过程监控和结果检验的关键抓手。

  • 愿景: 制定长期的治理目标,指导数据管治持续朝着最终目标发展,提供发展方向和动力。

体系框架建设

业务数据治理体系框架是针对数据治理工作整体做的顶层方案设计,框架定义好了业务线数据治理是什么、怎么做、做什么、用什么工具以及达成什么目标。拉齐各方对业务数据治理的认知,标准化治理路径方法和组成部分,指导数据治理有序、有效地进行。

(三)体系框架落地实施方案

通过标准化数据化系统化3大部分能力建设及运营,来实现数据管治体系框架的落地,并应用在数据治理问题的解决中,最终拿到可量化的结果。

三、治理体系化实践:标准化

数据治理标准化是企业进行数据资产管理的关键突破口和重要手段,一系列政策、法规、规划需要转化为标准和制度才能有效落地。数据治理标准化既有利于建立健全各种数据管理工作机制、完善业务流程,又有利于提升数据质量,保障数据安全合规使用,释放数据价值。

四、治理体系化实践:数字化

数字化工作,通过对数据生命周期各环节进行抽象和描述,构建整个数据开发工作的准确视图。

建设思路:通过对数据生命周期进行类比业务数仓建设中对业务对象的抽象和描述,建设元数据对象并构建元数据数仓和治理指标体系。这一框架主要包含元数据仓库、指标体系、数据资产等级,以及基于元数据仓库的各个数据应用。利用元数据驱动数据治理及日常团队管理,避免过多依赖经验解决问题,更好地服务业务。

五、治理体系化实践:系统化

数据百品-管治中心治理平台是美团内部的数据治理产品,通过集资产管理、问题分析监控、自动化治理、过程追踪、结果评价等功能于一体,实现了一站式、全覆盖的数据治理平台。该平台的理念是通过"管+治"相结合,从管理者及研发人员的视角对数据、人效等问题进行全面监控,为提升数据质量提供强有力的支撑。

六、思考

业务数据治理目标的制定

  • 明确业务需求:确保业务数据治理目标与业务需求紧密相连,关注业务价值的实现。
  • 可量化的目标:确保目标具有可量化性,能够通过指标或关键绩效指标(KPI)进行度量。

问题发现和目标制定

  • 全面的问题发现:从多个角度出发,包括业务、规范、用户反馈等,全面发现与业务数据相关的问题。
  • 目标的可实现性:确保制定的目标在当前业务和技术条件下是可实现的,避免过于理想化。

问题拆解和指标设计

  • 指标的可衡量性:设计能够客观度量问题和目标达成情况的指标,避免主观判断。
  • 元数据的关键性:借助元数据,将指标与具体数据资产、流程等关联,深入理解问题的来源。

解决SOP的制定和工具化

  • 全面性的解决方案:确保解决SOP(Standard Operating Procedure)覆盖问题的全面性,包括事前、事中、事后的各个阶段。
  • 工具化的支持:将解决SOP工具化,提高问题解决的效率,减少人工干预。

推广运营

  • 关注用户利益:确保问题解决过程不会与用户利益发生冲突,关注用户体验。
  • 阶段性推广:根据问题的重要程度,有计划地进行推广,避免一次性解决所有问题。

总结沉淀方法论

  • 迭代认知:将数据治理看作一个学习和持续改进的过程,不断迭代认知,适应业务和技术的变化。
  • 方法论的建立:将成功的经验和方法总结为方法论,为团队提供指导和规范。

参考文章和链接

  1. 业务数据治理体系化思考与实践 - 美团技术团队
  2. 李向阳、孙天云,《数据治理:业务价值的创造者》,电子工业出版社
  3. 杨涛,《数据治理:业务数据湖管理与治理》, 机械工业出版社
  4. 高洪岩、韩晓静,《大数据治理与架构实践》,电子工业出版社

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1280404.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

SmartSoftHelp8,代码版权保护

1.Html网页前端添加作者开发信息 2. Html网页添加版权信息 3. Css添加作者开发信息 4. JavaScript添加作者开发信息 5. C井后端代码添加作者开发信息 6. Dll内裤添加作者开发信息 7.应用程序添加开发作者信息,著作权,应用版权信息 下载地址&#…

使用Java语言实现字母之间的大小写转换

这个类的作用为实现字母之间的大小写转换,通过加减32来完成。 输入的代码 import java.util.Scanner; public class WordChangeDemo {public static void main(String[] args){try (Scanner in new Scanner(System.in)) {System.out.println("请输入您要进…

tomcat运行项目时,前端页面中文乱码

如图&#xff1a; 解决办法&#xff1a; 在前端页面添加下面代码 <%page language"java" pageEncoding"utf-8"%>再次运行

C++ Easyx 三子棋

目录 思路 框架​编辑 读取操作 数据操作 绘制画面 游戏的数据结构 用二维数组来模拟棋盘格 赢的情况 平局情况 Code 代码细节部分 &#xff08;1&#xff09;初始化棋盘格 &#xff08;2&#xff09; 初始化棋子类型​编辑 事件处理部分 落子 框架内代码的完善 数据处…

如何调用 API | 学习笔记

开发者学堂课程【阿里云 API 网关使用教程:如何调用 API】学习笔记&#xff0c;与课程紧密联系&#xff0c;让用户快速学习知识。 课程地址&#xff1a;阿里云登录 - 欢迎登录阿里云&#xff0c;安全稳定的云计算服务平台 如何调用 API 调用 API 的三要素 要调用 API 需要三…

Nginx 具体应用

1 Nginx 1.1 介绍 一款轻量级的 Web 服务器/反向代理服务器及电子邮件&#xff08;IMAP/POP3&#xff09;代理服务器。它占有的内存少&#xff0c;并发能力强&#xff0c;中国大陆使用 nginx 的网站有&#xff1a;百度、京东、新浪、网易、腾讯、淘宝等。第一个公开版本发布于…

1.1卷积的作用

上图解释了1∗1卷积如何适用于尺寸为H∗W∗D的输入层&#xff0c;滤波器大小为1∗1∗D&#xff0c;输出通道的尺寸为H∗W∗1。如果应用n个这样的滤波器&#xff0c;然后组合在一起&#xff0c;得到的输出层大小为H∗W∗n。 1.1∗1卷积的作用 调节通道数 由于 11 卷积并不会改…

【vue】vue-slick-carousel插件,实现横向滚动列表手动左右滚动(也可设置为自动滚动)

需求&#xff1a;图片列表横向滚动的时候&#xff0c;隐藏原始滚动条&#xff0c;通过左右箭头控制滚动条往左右按一定的步长移动。 el-carousel走马灯一滚动就是一屏&#xff0c;不适合我的需求 在npm官网搜vue-slick-carousel&#xff0c;查看更详细的配置 vue-slick-caro…

matlab 路面裂缝检测识别系统设计GUI

1、内容简介 略 23-可以交流、咨询、答疑 2、内容说明 路面裂缝检测识别系统设计GUI 基于matlab的GUI设计路面裂缝检测识别系统 matlab、GUI、直方图、裂缝检测、二值化 3、仿真分析 4、参考论文 略 链接&#xff1a;https://pan.baidu.com/s/1AAJ_SlHseYpa5HAwMJlk…

十五届海峡两岸电视主持新秀大会竞赛流程

海峡两岸电视主持新秀会是两岸电视媒体共同举办的一项活动&#xff0c;旨在为两岸年轻的电视主持人提供一个展示才华的舞台&#xff0c;促进两岸文化交流和青年交流。本届新秀会是第十二届海峡两岸电视艺术节的重要活动之一。本次竞赛赛制流程如下&#xff1a; &#xff08;1&…

遥感方向期刊总结

开眼看期刊~ 期刊分区信息搜索网址中国科学院文献情报中心期刊分区表升级版科研通期刊查询&#xff1a; 遥感领域常见期刊Nature CommunicationsRemote Sensing of EnvironmentProceedings of the National Academy of Sciences &#xff08;PNAS&#xff09;ISPRS Journal of …

SHAP(六):使用 XGBoost 和 HyperOpt 进行信用卡欺诈检测

SHAP&#xff08;六&#xff09;&#xff1a;使用 XGBoost 和 HyperOpt 进行信用卡欺诈检测 本笔记本介绍了 XGBoost Classifier 在金融行业中的实现&#xff0c;特别是在信用卡欺诈检测方面。 构建 XGBoost 分类器后&#xff0c;它将使用 HyperOpt 库&#xff08;sklearn 的 …

Mybatis 的操作(要结合上个博客一起)续集

Mybatis 是一款优秀的 持久性 框架,用于简化 JDBC 的开发 持久层 : 指的就是持久化操作的层,通常指数据访问层(dao),是用来操作数据库的 简单来说 Mybatis 是更简单完成程序和数据库交互的框架 Mybatis 的写法有两种 : 1.xml 2.注解 这两者各有利弊,后面进行总结 Mybati…

使用Java语言实现变量互换

一、 java运算 通过异或运算符实现两个变量的互换 import java.util.Scanner;public class ExchangeValueDemo {public static void main(String[] args){try (Scanner scan new Scanner(System.in)) {System.out.println("请输入A的值&#xff1a;");long A sca…

Kafka 的特点和优势

Apache Kafka 作为一款分布式流处理平台&#xff0c;以其独特的特点和卓越的优势成为实时数据处理领域的瑰宝。本文将深入研究 Kafka 的各项特点和优势&#xff0c;并通过详实的示例代码展示其在不同场景下的强大应用。 高吞吐量和水平扩展 Kafka 的设计注重高吞吐量和水平扩…

9-4 函数输入信息,函数输出信息

#include<stdio.h>struct student{char name[10];int num;char score[3]; }stu[5]; //结构体输入信息int main(){void input(struct student stu[]);void print(struct student stu[]);input(stu);print(stu);return 0; }void input(struct student stu[5]) { int i,j;fo…

JVM虚拟机:JVM参数之标配参数

本文重点 本文我们将学习JVM中的标配参数 标配参数 从jdk刚开始就有的参数&#xff0c;比如&#xff1a; -version -help -showversion

万界星空科技灯具行业MES介绍

中国是LED照明产品最大的生产制造国&#xff0c;如今&#xff0c;我国初步形成了包括LED外延片的生产、LED芯片的制备、LED芯片的封装以及LED产品应用在内的较为完超为产业链&#xff0c;随着LED照明市场渗诱率的快速警升&#xff0c;LED下游应用市场将会越来越广阔。这也将推动…

30、LCD1602

LCD1602介绍 LCD1602&#xff08;Liquid Crystal Display&#xff09;液晶显示屏是一种字符型液晶显示模块&#xff0c;可以显示ASCII码的标准字符和其它的一些内置特殊字符&#xff0c;还可以有8个自定义字符 显示容量&#xff1a;162个字符&#xff0c;每个字符为5*7点阵 …

机器视觉最全面试题总结

文章目录 1. 为什么需要做特征归一化、标准化&#xff1f;2. 常用常用的归一化和标准化的方法有哪些&#xff1f;3. 介绍一下空洞卷积的原理和作用4. 怎么判断模型是否过拟合&#xff0c;有哪些防止过拟合的策略&#xff1f;5. 除了SGD和Adam之外&#xff0c;你还知道哪些优化算…