数据是数字经济的基础,数据管理是数字化转型的前提。领先的企业,已经确立了数据治理的基础地位,从统一数据文化、数据思想的角度组织学习,全面提升数据管理和治理能力。业务负责制是基石: 数据治理绝不仅仅是 IT 部门的事,必须由业务部门来主导和负责。华为建立了“业务负责制的数据管理责任体系”,明确了各级数据 Owner(数据责任人),确保数据工作能真正服务于业务,并由业务来驱动 。 虚实结合的组织保障:既要有公司层面的数据管理部门来制定统一的政策、流程和标准,也要有深入到各个业务领域的数据管理组来负责落地执行。这种“虚实结合”的组织架构,确保了数据治理既有顶层设计,又能灵活适应各业务线的需求 。德邦也参照这种思路,规划了自身的决策层、管理层和执行层组织架构,虽然在初期可能并非所有组织都完全实体化(比如提到业务域数据管理组和公司级数据管理部当时没有实体),但明确了方向和责任主体。 流程是关键:建立一套清晰、规范的数据管理流程至关重要。华为梳理了从数据标准、模型管理、数据质量到数据服务的全套流程 。德邦也意识到了这一点,着手梳理和建立了包括数据标准管理、模型管理、数据质量度量与改进、数据服务等在内的多项关键流程 ,目标是让数据工作的每个环节都有章可循。 德邦的数据治理并非一蹴而就,而是经历了一个逐步迭代、持续优化的过程 。他们打出了一套组合拳,核心思路是:建组织、梳流程、上平台、抓标准、提质量。 组织保障先行(虽然有挑战):如前所述,德邦规划了数据治理的组织架构 ,明确了 IT 侧和业务侧的角色与职责,以及决策、管理和执行的分工。虽然理想的组织完全落地需要过程,但有了清晰的蓝图和高层的推动意愿(如数据管理决策主体可能是 CTO 或业务副总),是成功的第一步。这里也提醒大家,数据治理是“一把手”工程,没有高层的决心和持续投入,很难真正推行下去。 流程梳理打基础: 德邦梳理了十多项关键的数据管理流程 ,覆盖了数据从产生、加工、应用到质量监控的全生命周期。比如,《数据标准管理流程》规范了标准的创建、审批和发布;《数据质量改进流程》形成了问题发现、解决、跟踪的闭环;《概念数据模型管理流程》则强调在设计阶段就要把好关。这些流程的建立,为后续的平台化管理和标准化执行奠定了基础。 平台工具强支撑: 再好的理念和流程,也需要工具来承载和落地。德邦选择了与网易数帆合作 ,利用其数据治理平台来实现数据管理的全流程线上化 。这个平台打通了从需求、设计、开发、测试到上线的各个环节,集成了指标管理、模型设计、元数据管理、血缘分析、数据质量监控等核心能力 。这大大提升了数据开发和管理的效率,也让治理工作变得可视化、可度量。 统一指标,消除“打架”: 针对“数据打架”的痛点,德邦建立了统一的指标中心 。通过《指标管理制度》保障,实现了指标的增删改查线上化管理,统一了指标的定义、口径和计算逻辑 。更关键的是,实现了指标与数仓模型的绑定 ,让大家都能清楚地知道每个指标是怎么算出来的,数据来源是哪里,大大提高了指标的复用度和透明度 。 规范模型,提升复用: 为了解决“重复造轮子”的问题,德邦建设了模型中心 ,对数据仓库进行规范化、统一化、分层化的管理。在模型设计时就明确与指标的关联关系 ,并通过数据血缘来监控模型的使用情况和复用度 ,避免无效和重复建设。从他们展示的数据看,模型复用度(如下游表数量平均值)有了一定的量化体现 。 严控标准,保障一致: 数据标准是数据治理的基石。德邦推动源端系统在数据入湖时就维护好数据标准 ,并建立了数据标准模块,将标准与数据模型绑定 。这些标准不仅指导了数据开发,还成为了数据质量规则制定的依据 。通过数据地图,任何人都可以方便地查询模型的数据标准 ,确保大家对数据的理解是一致的。 数据地图,找数不愁:为了解决“找数难”的问题,德邦的数据地图发挥了重要作用 。无论是源系统表、数仓模型、指标还是数据标准,都可以在地图中进行搜索和查询 。用户可以轻松查看模型的字段信息、血缘关系(数据从哪里来,到哪里去)以及产出信息 ,快速定位自己需要的数据,大大提升了用数效率。 闭环管理,提升质量:针对数据质量问题,德邦基于数据标准制定了数据质量规则 ,并通过数据质量中心进行自动化的监控和度量 。一旦发现问题,系统会自动播报警报 ,触发数据质量改进流程 ,形成从问题发现、分析、解决到效果跟踪的闭环管理。业务在不断变化,系统在不断迭代,新的数据源、新的应用场景层出不穷,这些都会给数据治理带来新的挑战。同时,随着 AI、大模型等技术的发展,如何将这些新技术应用于数据治理,提升治理的智能化水平,也是未来的重要方向。
数据治理确实很艰辛,需要投入大量的资源和精力,更需要有足够的耐心和强大的执行力 。但同时,它带来的价值也是巨大的。一个治理良好的数据体系,是企业实现精细化运营、智能化决策、数字化创新的坚实底座。
|
|
| |
| | |
| | |
| 大型央企数据治理企业架构数字化转型规划解决方案.PPTX | |
| | |
| | |
| | |
| | |
| | |
回复 数据治理 或 数据管理 或 数据中台 获得更多相关的文档 |
说明:本文部分文字与图片资源来自于网络,分享此文是出于传递更多信息之目的,若有来源标注错误或侵犯了您的合法权益,请立即后台留言通知我们,情况属实,我们会第一时间予以删除,并同时向您表示歉意。
还没有评论,来说两句吧...