如何让数据治理快速出成效——反向治理,以终为始

2024-08-30 17:28

本文主要是介绍如何让数据治理快速出成效——反向治理,以终为始,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

数据治理有不少知名的方法和框架,如DAMA、DGI、CMMI-DMM、DCMM、ITSS数据治理框架等。这些数据治理方法和框架,从战略到落地都提出来完善的体系,但是按照这些方法和框架实施的,却鲜有成功案例。究其问题无非在于:

一、体系框架过于复杂,涉及组织、流程制度、标准规范、技术平台等诸多方面,难于协调和管控。

二、过于依靠专家设计,数据治理项目往往集中很多来自于内外部的技术专家、管理专家、业务专家等,企图通过专家们的调查、研讨设计出一套完美的数据治理体系出来。这几乎是不可能完成的任务,因为要组建能从广度和深度方面都能完全覆盖的专家团队就基本不可能,再者时间、资源总是有限的。

三、以出文件解决问题,数据治理确实需要产出标准规范、流程制度、组织架构等文件,但出文件就结束了,没有客观、持续、有效的手段进行保障文件的执行,不能解决实际问题。

四、以建系统解决问题,也有不少单位数据治理仅仅定义为咨询,提出一套体系框架,规划出一系列系统建设,认为只要建设了相关系统就能解决数据问题。比如财务科目、客商信息、物料编码,认为上一套主数据系统就解决了,而实际的情况,上了主数据系统的单位,各业务系统中主数据依然存在不一致问题。

五、 以规划思路自顶向下而行,缺少抓手、范围无限扩大、具体问题轻拿轻放。

那么,是不是由于数据治理的复杂性,如果按照以前的方法去做,就一定会出范围广、周期长、投入大、见效慢等问题。

鲁四海团队根据十多年的数据治理经验,也就是十多年的填坑经历,提出了“反向治理,以终为始”的数据治理方法,解决了数据治理缺少抓手、投入大、见效慢的问题。

“反向治理,以终为始”是在吸收了DAMA、DGI等优秀数据治理框架基础上,突出落地性和技术融合性,以结果为导向持续迭代的方法。整体框架如下图所示:

6b92918d3176f2a88942eb87be3a6110.jpeg

“反向治理”的特点:

一、抓手在“数据仓库”,即先建设数据仓库,将分散在业务系统数据库、接口的数据集中到数据仓库进行碰撞,提出基于现状的数据模型。

二、“目标导向,兼顾先进性”,通过对数据产品(数据的应用,比如报表、报告、API接口等)的梳理,扩展数据模型,使得数据模型具备满足更多应用场景的先进性。

三、数据质量“以终为始”,数据质量是数据治理的目标,以数据仓库建模开始,基于数据模型,通过MPP数据仓库的高性能,快速定位数据质量问题,并以此开始数据治理任务实施,形成“质量反馈——治理改进”的循环迭代,让数据问题收敛。

四、解决标准规范,与实际系统、业务需求偏离问题。通过现有数据碰撞和数据应用目标的分析,提出的数据模型,在模型基础上提出的标准规范,不再空洞。

五、流程制度和组织改进的依据来源于数据仓库得出的标准规范和质量报告,所以在和各部门研讨时有理有据,避免传统数据治理研讨中“只有定性问题,没有定量问题;只有宏观问题,没有具体问题”的尴尬。

这篇关于如何让数据治理快速出成效——反向治理,以终为始的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1121466

相关文章

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal

使用SpringBoot整合Sharding Sphere实现数据脱敏的示例

《使用SpringBoot整合ShardingSphere实现数据脱敏的示例》ApacheShardingSphere数据脱敏模块,通过SQL拦截与改写实现敏感信息加密存储,解决手动处理繁琐及系统改... 目录痛点一:痛点二:脱敏配置Quick Start——Spring 显示配置:1.引入依赖2.创建脱敏

详解如何使用Python构建从数据到文档的自动化工作流

《详解如何使用Python构建从数据到文档的自动化工作流》这篇文章将通过真实工作场景拆解,为大家展示如何用Python构建自动化工作流,让工具代替人力完成这些数字苦力活,感兴趣的小伙伴可以跟随小编一起... 目录一、Excel处理:从数据搬运工到智能分析师二、PDF处理:文档工厂的智能生产线三、邮件自动化:

Python数据分析与可视化的全面指南(从数据清洗到图表呈现)

《Python数据分析与可视化的全面指南(从数据清洗到图表呈现)》Python是数据分析与可视化领域中最受欢迎的编程语言之一,凭借其丰富的库和工具,Python能够帮助我们快速处理、分析数据并生成高质... 目录一、数据采集与初步探索二、数据清洗的七种武器1. 缺失值处理策略2. 异常值检测与修正3. 数据

pandas实现数据concat拼接的示例代码

《pandas实现数据concat拼接的示例代码》pandas.concat用于合并DataFrame或Series,本文主要介绍了pandas实现数据concat拼接的示例代码,具有一定的参考价值,... 目录语法示例:使用pandas.concat合并数据默认的concat:参数axis=0,join=

C#代码实现解析WTGPS和BD数据

《C#代码实现解析WTGPS和BD数据》在现代的导航与定位应用中,准确解析GPS和北斗(BD)等卫星定位数据至关重要,本文将使用C#语言实现解析WTGPS和BD数据,需要的可以了解下... 目录一、代码结构概览1. 核心解析方法2. 位置信息解析3. 经纬度转换方法4. 日期和时间戳解析5. 辅助方法二、L

使用Python和Matplotlib实现可视化字体轮廓(从路径数据到矢量图形)

《使用Python和Matplotlib实现可视化字体轮廓(从路径数据到矢量图形)》字体设计和矢量图形处理是编程中一个有趣且实用的领域,通过Python的matplotlib库,我们可以轻松将字体轮廓... 目录背景知识字体轮廓的表示实现步骤1. 安装依赖库2. 准备数据3. 解析路径指令4. 绘制图形关键

解决mysql插入数据锁等待超时报错:Lock wait timeout exceeded;try restarting transaction

《解决mysql插入数据锁等待超时报错:Lockwaittimeoutexceeded;tryrestartingtransaction》:本文主要介绍解决mysql插入数据锁等待超时报... 目录报错信息解决办法1、数据库中执行如下sql2、再到 INNODB_TRX 事务表中查看总结报错信息Lock

使用C#删除Excel表格中的重复行数据的代码详解

《使用C#删除Excel表格中的重复行数据的代码详解》重复行是指在Excel表格中完全相同的多行数据,删除这些重复行至关重要,因为它们不仅会干扰数据分析,还可能导致错误的决策和结论,所以本文给大家介绍... 目录简介使用工具C# 删除Excel工作表中的重复行语法工作原理实现代码C# 删除指定Excel单元

Linux lvm实例之如何创建一个专用于MySQL数据存储的LVM卷组

《Linuxlvm实例之如何创建一个专用于MySQL数据存储的LVM卷组》:本文主要介绍使用Linux创建一个专用于MySQL数据存储的LVM卷组的实例,具有很好的参考价值,希望对大家有所帮助,... 目录在Centos 7上创建卷China编程组并配置mysql数据目录1. 检查现有磁盘2. 创建物理卷3. 创