​【rainbowzhou 面试20/101】技术提问--如何进行数据治理？

什么是数据治理？

现阶段，没有统一的标准定义。以下列举了3个权威机构的定义。

国际数据管理协会(DAMA)：数据治理是对数据资产管理行使权力和控制的活动集合（规划、监控和执行)。

国际数据治理研究所(DGI)：数据治理是一个通过一系列信息相关的过程来实现数据相关事务的决策和职责分工的系统，这些过程按照达成共识的模型来执行，该模型描述了谁（Who）能根据什么信息，在什么时间（When）和情况(Where)下，用什么方法（How)，采取什么行动(What).

国际商业机器公司(IBM)：数据治理是一门将数据视为一项企业资产的学科。它涉及到以企业资产的形式对数据进行优化、保护和利用的决策权利．它涉及到对组织内的人员、流程、技术、策略的编排，帮助企业获取最优的数据价值。

数据治理的意义

数据是数字化转型的基础，只有做好数据治理，充分挖掘数据价值，才能更好地推进企业数字化转型。

数据治理有3个方面的积极意义：

1. 数据层面：可提高数据质量、建立数据统一管理机制、保护数据安全等。
2. 组织效能方面：可通过各类转型工具平台的搭建，降低沟通成本、提高工作效率。
3. 业务创新方面：提供更丰富的产品和更优质的服务，例如数据挖掘产品（评分卡、用户画像）、 多样实时的数据查询服务等。

如何进行数据治理

数据治理流程的各个阶段

数据治理的顶层设计原理：

1. 战略：企业在开始数据治理前，需要明确中长期规划目标。
2. 机制：企业可成立专门的数据治理小组，也可以由企业内的 IT 或数据部门负责，推动流程评审、 规范制定等工作。
3. 领域：一般来说，数据治理可分为数据安全、数据质量、元数据、主数据等多个领域，企业需根据实际情况去选择。（下文会以元数据管理作为示例）
4. 平台：在确定领域后，数据治理小组进行方案设计并开发实现，完成数据治理平台的建设。在数据治理实施过程中，数据治理平台的设计及研发是最重要且最耗时的工作。

建立数据治理的计划

数据治理规划三步走：

1. 了解企业近期以及中长期在业务和技术上的策略及目标，特别是与数据治理相关的信息。
2. 通过书面访谈和现场调研等方式在企业内部营造数据治理的氛围、让相关人员数据治理目标普遍达成共识。
3. 根据现实的差距制定计划，制定企业未来 3-5 年的数据规划。

数据管理团队构建和制度构建

根据先进的数据治理经验，建立企业的数据治理要素体系、组织架构等。

• 一般需要如下角色：领导决策层、业务部门主管角色、IT 部门主管角色、执行项目经理等。可以是专职人员， 也可由各部门抽调兼职人员。
• 结合企业的现状，为数据治理的开展提供有据可依的管理办法、规定数据治理的业务流程、数据治理的认责体系、人员角色和岗位职责、数据治理的支持环境和颁布数据治理的规章制度政策等。
• 管理办法还规定了工具产品的使用方法、与产品使用流程。

建立企业数据模型制定标准

• 提供数据模型实体、属 性及其关系，对企业运营 管理和管理过程中涉及到 的业务概念和逻辑规则 进行统一定义。
• 企业对现有的业务与概念有了全新的认识，为 企 业内部的决策提供了重要的依据。根据模型按行业不同划分，一般包括当事人、产品、 协议、财务等。数据标准提供了一整套规范，目的是为了业务人员、技术人员在提到一个词的时候有规范的含义。

元数据管理

元数据是什么？

元数据是用来描述数据的数据。一般分为业务元数据、技术元数据、管理元数据。

元数据用来干什么？解决什么问题？

问题：

无论是企业的业务部门还是IT部门，很少能完整地拿出一套企业各项数据的业务含义、口径、技术标准、分布情况等的说明。

意义：

1. 使用元数据管理可以自动化地获取整个企业的数据业务含义，帮助理解数据，增加分析的敏捷性。
2. 使用元数据产品能够方便内部管理、审计或外部监管的需求追溯业务指标、报表的数据来源和加工过程，追溯数据的来源。
3. 元数据管理可以针对企业内部、外部的数据需求，快速建立业务与技术之间的衔接，为企业管理提供重要的保障。
4. 元数据管理能够增强数据理解，可以架起企业内业务与 IT 部门之间的一座桥梁。提高信息的有效性，可访问性，有助于节约成本，提高资产机制，提高运营满意度。

元数据管理体系如下图：