数据治理概述
数据分类
按数据对象分类
参考数据
参考数据是指对其他数据进行分类和规范的数据,如国家、地区、货币、计量单位等产业通用的数据及各产业特色基础配置数据。为了简化,有的企业称这类数据为配置型主数据,也有的企业称这类数据为通用基础类数据。它是相对稳定、静态的数据,基本上不会变化,往往通过系统配置文件给予规范并固化在信息管理系统中。
主数据
主数据是指满足跨部门业务协同需要的、反映核心业务实体状态属性的基础信息。主数据是用来描述企业核心业务实体的数据,是企业核心业务对象、交易业务的执行主体,是在整个价值链上被重复或共享应用于多个业务流程、跨越多个业务部门和系统、高价值的基础数据,也是各业务应用和各系统之间进行数据交互的基础。从业务角度看,主数据是相对固定、变化缓慢的,但它是企业信息系统的神经中枢,是业务运行和决策分析的基础,如供应商、客户、企业组织机构和员工、产品、客户、供应商、物料等主数据
业务活动数据
业务活动数据(又称交易数据)是指在业务活动过程中产生的数据,是企业日常经营活动的直接体现,也是围绕主数据实体产生的业务行为和结果型数据,如采购订单、销售订单、发票、会计凭证等数据。业务活动数据存在于联机事务处理系统中(OLTP系统),具有瞬间生成和动态的特点。
分析数据
分析数据(又称统计数据、报表数据或指标数据等)是组织在经营分析过程中衡量某一个目标或事物的数据,一般由指标名称、时间和数值等组成。
时序数据
时序数据是指时间序列数据。它是按时间顺序记录的数据列,在同一个数据列中的各个数据必须是同口径的,要求具有可比性。在工业企业中,实时数据是时序数据的一种,如设备运行监测类数据、安全类监测数据、环境监测类数据。
按存储形式划分
结构化数据
结构化数据是指数据元素之间具有统一且确定关系的数据。它由明确定义的数据类型组成。结构化数据的一般特点是数据以行为单位,一行数据表示一个实体的信息,每一行数据的属性是相同的。结构化数据的分析更为便利,且存在成熟的分析工具。
非结构化数据
非结构化数据是指数据元素之间没有统一和确定关系的数据。它是具有内部结构,但不通过预定义的数据模型或模式进行结构化的数据,如各种格式的图片、视频等。非结构化数据占企业全部数据的80%以上,但直接分析非结构化数据得有很强的专业性。
半结构化数据
半结构化数据是指数据元素之间的关系介于结构化数据和非结构数据之间的数据。它是非关系模型的、有基本固定结构模式的数据,例如日志文件、XML文档、JSON文档、E-mail等。
按数据库的类型划分
关系型数据库
关系型数据库是采用关系数据模型的数据库系统。关系数据模型实际上是表示各类实体及其之间联系的由行和列构成的二维表结构。一个关系数据数据库由多个二维表组成。表中的每一行为一个元组(或称一个记录),每一列为一个属性。属性的取值范围被称为域。对关系型数据库进行操作通常采用结构化查询语言(SQL)。
非关系型数据库
非关系型数据库是对不同于传统的关系数据库的数据库管理系统的统称。和关系型数据库相比,两者存在许多显著的不同点,其中最重要的是非关系型数据库使用NoSQL而不使用SQL作为查询语言。其数据存储可以不需要固定的表格模式,也经常会避免使用SQL的JOIN操作,一般有水平可扩展性的特征。
图数据库
图数据库是以图结构来表示和存储信息的数据库。
时序数据库
时序数据库是指时间序列数据。它是按时间顺序记录的数据列,在同一个数据列中的各个数据必须是同口径的,要求具有可比性。时序数据可以是时期数,也可以是时点数。
数据治理的顶层架构
五域模型,即管控域、过程域、治理域、技术域、价值域。企业在开展数据治理之前,首先要基于企业战略和IT战略制定数据治理的战略目标,在明确战略目标的基础上再细化“五域模型”内容。

管控域
在数据治理战略指导下制定企业数据治理组织,明确组织的责、权、利、岗位编制及技能要求。
治理域
数据治理的主体,明确数据治理的对象和目标。根据数据资产的构成,企业数据治理又分为主数据治理、交易数据治理和数据指标治理。
技术域
数据治理的支撑手段,提供数据治理所需的数据架构、治理工具平台,包括元数据管理、主数据管理、数据指标管理、数据模型管理、数据质量管理、数据安全管理等功能模块。
过程域
数据治理的方法论。数据治理过程包括评估与分析、规划与设计、实施的PDCA循环。在评估与分析阶段,要评价现有数据治理的成熟度、风险及合规性,业务对数据治理的需求。在规划和设计阶段,要明确数据治理的目标和任务,制定数据治理的相关制度和流程,设计数据标准、数据模型、数据架构及数据治理的实施路径。在实施阶段,要制定数据治理的相关制度、流程细节,选择合适的数据治理工具并通过定制化开发来满足数据治理要求。
价值域
数据治理的目标就是通过对数据资产的管控,挖掘数据资产的价值,并通过数据的流动、共享、交易,实现数据资产的变现。具体包括以下3个方面:(1)数据价值:对数据价值进行财务建模及数据价值评估的过程。(2)数据共享:通过实现信息整合和分发机制,支持跨业务、跨部门、跨行业、跨企业的信息流通和共享。(3)数据变现:通过数据的共享和交易,将数据转变成财务意义上的资产。
数据治理步骤
战略
企业数据战略一般根据IT战略的制定而制定,随着IT战略的修订而修订,由企业的信息化负责人及业务负责人共同主导制定。
组织
数据治理的组织建设一般包括组织架构设计、部门职责、人员编制、岗位职责及能力要求、绩效管理等内容。
制度
企业的数据治理制度通常根据企业的IT制度的总体框架和指导原则制定,往往包含数据质量管理、数据标准管理、数据安全管理、数据绩效管理等制度,以及元数据管理、主数据管理、交易数据管理、数据指标管理等办法及若干指导手册。
流程
数据治理流程主要包括从数据的生产、存储、处理、使用、共享、销毁全生命周期过程中所遵循的活动步骤,以及元数据管理、主数据管理、数据指标管理等流程。
绩效
数据绩效管理包括数据管理指标、数据认责机制、数据考核标准、数据管理的奖惩机制,以及绩效管理过程的一系列活动集合。
标准
数据标准一般分为元数据标准、主数据标准、交易数据标准、数据指标标准、数据分类标准、数据编码标准、数据集成标准等内容。数据标准管理是规范数据标准的内容、程序和方法的活动,分为标准制定、标准实施和控制、标准修订等。
工具
数据治理管理工具包括数据架构工具、元数据管理工具、数据指标管理工具、主数据管理工具、时序数据管理工具、数据交换与服务工具、质量管理工具和安全管理工具等。
价值:数据价值、数据共享、数据变现