[优秀文章]浅谈数据治理、数据管理、数据资源与数据资产管理

来自腾讯云 --[木东居士的专栏]

前言

随着信息技术的不断涌现和普及,业务发展加快了数据膨胀的速度,行业内衍生了较多的新名词,如数据治理、数据管理、数据资源管理、数据资产管理等名词的定义很多,概念容易混淆,本文对这些名词术语及内涵进行系统的解析,便于读者对数据相关的概念有全面的认识。

数据与数据管理 (Data and Data Management)

1.1

数据

数据(Data)是指所有能输入到计算机并被计算机程序处理的符号的介质的总称,是用于输入电子计算机进行处理,具有一定意义的数字、字母、符号和模拟量等的通称,是组成信息系统的最基本要素。

未来是智能时代,企业的决策机制将发生巨大变化,谁最先拥抱数据,谁就拥有更多智慧,谁就拥有更强竞争力,大数据技术将会推动人类无所不知、无所不晓、无所不能,助力无所不能的是无所不包的数据,未来十年,只有拥抱数据技术才是唯一选择。

1.2

数据管理

数据管理(Data Management)的概念是伴随上世纪八十年代数据随机存储技术和数据库技术的使用,计算机系统中的数据可以方便地存储和访问而提出的。2015年,国际数据管理协会(DAMA,Data Management Association International)在DBMOK2.0知识领域将其扩展为11个管理职能,分别是数据架构、数据模型与设计、数据存储与操作、数据安全(Data Security)、数据集成与互操作性、文件和内容、参考数据和主数据(Master Data)、数据仓库(Data Warehouse)和商务智能(BI,Business Intelligence)、元数据(Metadata)、数据质量(Data quality)等。

数据管理(Data Management)是指通过规划、控制与提供数据和信息资产职能,包括开发、执行和监督有关数据的计划、政策、方案、项目、流程、方法和程序,以获取、控制、保护、交付和提高数据和信息资产价值。

表1.各大机构对数据管理的定义一览表

DAMA-DMBOK

数据管理(Data Management, DM)是为实现数据和信息资产价值的获取、控制、保护、交付以及提升,对政策、实践和项目所做的计划、执行和监督。该定义包含以下三层含义:(1)数据管理包含一系列业务职能,包括政策、计划、实践和项目的计划和执行;(2)数据管理包含一套严格的管理规范和过程,用于确保业务职能得到有效履行;(3)数据管理包含多个由业务领导和技术专家组成的管理团队,负责落实管理规范和过程。数据管理的其他称谓包括:信息管理(IM)、企业信息管理(EIM)、企业数据管理(EDM)、数据资源管理(DRM)、信息资源管理(IRM)、信息资产管理(IAM)。

ISO OBP
(1)数据管理提供对数据的访问、执行或监视数据存储以及控制数据处理系统中所有输入输出操作的功能。——摘自ISO/IEC 20944-1:2013(en), 3.6.6.2(2)数据管理的接口有向更高级别的应用程序和接口提供读取、写入、收集、筛选、分组和事件订阅以及RFID标记数据通知的功能。——摘自ISO/IEC 24791-1:2010(en), 4.2(3)数据管理在数据处理系统中,提供对数据的访问、执行或监视数据存储以及控制输入输出操作的功能〔ISO/IEC 2382:2015,信息技术词汇〕。在整个数据生命周期中,提供对符合数据要求的业务和技术数据的规划、获取和管理。——摘自ISO/IEC/IEEE 24765:2017(en), 3.1017

数据治理(Data Governance)

2.1

数据治理的定义

数据治理(Data Governance)是一个正在不断发展的新兴学科,与众多新兴学科一样,目前数据治理存在多种定义,各大机构对数据治理的定义,如下表所示:

表2. 各大机构对数据治理的定义一览表

DGI

数据治理是一个通过一系列信息相关的过程来实现决策权和职责分工的系统,这些过程按照达成共识的模型来执行,该模型描述了谁(Who)能根据什么信息,在什么时间(When)和情况(Where)下,用什么方法(How),采取什么行动(What)。

IBM

数据治理是一门将数据视为一项企业资产的学科。数据治理是针对数据管理的质量控制规范,它将严密性和纪律性植入企业的数据管理、利用、优化和保护过程中。它涉及到以企业资产的形式对数据进行优化、保护和利用的决策权利。它涉及到对组织内的人员、流程、技术和策略的编排,以从企业数据获取最优的价值。

DMBOK
数据治理(Data Governance, DG)是指对数据资产管理行使权力和控制的活动集合(规划、监督和执行)。

COBIT 5

COBIT 5中给出的不是数据治理定义,而是信息治理。因为这两个术语实际上是同义词,所以可采用COBIT 5的信息治理定义作为数据治理定义。信息治理(Information Governance, IG)包含以下三个方面的内容[ISA13]:(1)确保信息利益相关者的需要、条件和选择得到评估,以达成平衡的、一致的企业目标,这些企业目标需要通过对信息资源的获取和管理实现;(2)确保通过优先排序和决策机制为信息管理职能设定方向;(3)确保基于达成一致的方向和目标对信息资源的绩效和合规进行监督。

百度百科

数据治理是指从使用零散数据变为使用统一主数据、从具有很少或没有组织和流程治理到企业范围内的数据治理、从尝试处理主数据混乱状况到主数据井井有条的一个过程,并最终使企业能将数据作为企业的核心资产来管理。

学术文献

(1)数据治理是指企业数据管理的决策权和相关职责的分配。(2)数据治理是一个用于明确企业数据使用的决策权和职责分工的结构化框架。(3)数据治理是指企业数据资产的决策权分配。(4)数据治理是金融机构对有效数据产生影响的人员、过程、技术应用和组织的处理和管控,以确保数据对合理使用者和所有者产生的内涵性、有效性、一致性、时效性、可用性和质量维度。

2.2

狭义的数据治理

狭义的数据治理的驱动力最早源自两个方面:

1)内部风险管理的需要,包括:财务做假、敏感数据涉密、数据质量差影响关键决策等。

2)为了满足外部监管和合规的需要,比如萨班斯-奥克斯利法案、巴塞尔I/巴塞尔协议、健康保险流通与责任法案(HIPAA)等。

但随着全球越来越多的企业了解到信息资产的重要性和价值,在过去几年中,数据治理的目标也在发生些转变。除满足监管和风险管理外,如何通过数据治理来创建业务价值备受关注。

2.3

广义的数据治理

广义的数据治理是对数据资产管理行使权力和控制的活动集合(规划、监控和执行),指导其他数据管理职能如何执行,在高层次上执行数据管理制度。组织为实现数据资产价值最大化所开展的一系列持续工作过程,明确数据相关方的责权、协调数据相关方达成数据利益一致、促进数据相关方采取联合数据行动,数据治理与数据管理的关系如下图所示:

image

图1.数据治理与数据管理关系

数据治理的全过程:从范围来讲,数据治理涵盖了从前端事务处理系统、后段业务数据库到终端的数据分析,从源头到终端再回到源头形成一个闭环负反馈系统(控制理论中趋稳的系统),从目的来讲,数据治理就是对数据的获取、处理、使用进行监督(监管就是我们在执行层面对信息系统的负反馈),而监管的职能主要通过五个方面的执行力来保证——发现、监督、控制、沟通、整合。

数据治理的目标:共同保证“正确的信息,以正确的形式,在正确的时候,交付给正确的人”。


数据治理的重要性

高质量的数据对任何企业都是战略性资产,随着企业推进数字化转型的进程,有效数据正迅速成为一个关键的业务差异,但要使数据具有价值,需确保数据的可信任、安全性、可访问性、准确性、共享性和及时性。数据治理有助于增强企业灵活性以最小化决策相关成本和风险,特别在数字经济中,数据治理比以往任何时候都显得尤为重要。

缺乏企业高层领导的支持、系统间的数据壁垒和整个治理项目缺乏明确的流程和数据模板、数据所有权和问责机制不清等因素是导致项目失败或者治理结果不理想的主要原因。涉及到企业中所有跨功能和跨业务的决策机制。数据治理具有战略性、长期性、艰巨性、系统性、持续企业内部数据环境优化治理工作,因此数据治理是一个漫长而持续的过程,没有一针顶破天的诀窍,也没有立竿见影的捷径,要避免对数据治理工作粗浅的认识

数据资源管理(DRM,Data Resource Management)

数据资源管理(Data Resource Management)是应用数据库管理、数据仓库等信息系统技术和其他数据管理工具,完成组织数据资源管理任务,满足企业信息需求的管理活动。

数据资源管理(Data Resource Management)是应用信息技术和软件工具完成组织数据资源管理采用文件处理方法,在这种方法中,数据根据特定的组织应用程序的处理要求被组织成特定的数据记录文件,只能以特定的方式进行访问。这种方法在为现代企业提供流程管理、组织管理信息时显得过于麻烦,成本过高并且不够灵活。因此出现了数据库管理办法,它可以解决文件处理系统存在的问题。

全业务域数据资源中心为企业提供完整的数据中心解决方案,提升企业管理和运营效率,实现数据采集管理、标准规范管理、元数据管理、主数据管理、数据协同与追溯管理、调度管理,数据反捕、BI决策分析等,通过体系化的数据资源管理中心的建设,可有效打通企业内部之间的数据流通渠道,解决企业管理信息化在数据层面的核心问题,形成横向集成、纵向贯通的高效、有序的信息流,发挥数据信息的基础支撑作用,满足企业对信息和数据的需求,帮助企业解决数据集成和共享、盘活数据资产和有效规避信息孤岛等问题。

数据资产与数据资产管理(DAM,Data Asset Management)**

4.1数据资产的定义

数据资产(Data Asset)是指由企业拥有或者控制的,能够为企业带来未来经济利益的,以物理或电子的方式记录的数据资源,如文件资料、电子数据等。在企业中,并非所有的数据都构成数据资产,数据资产是能够为企业产生价值的数据资源。

4.2数据资产的属性

数据资产具有无形资产的属性,从这个角度出发,我们可以发现数据资产主要有以下特性:无消耗性、增值性、依附性、价值易变性、战略性。

  • 无消耗性:数据资产的每次使用只需要花费很低的成本,不会因为使用频率的增加而磨损、消耗,与其他传统无形资产有相似性。
  • 增值性:企业通过稳定发展,会促使数据资产在原有的基础上,数据规模和数据维度的不断积累,整体价值进一步提升。
  • 依附性:与其他无形资产类似,数据资产不能独立发挥作用,其发挥作用和效应往往依附于相应的软件、硬件。
  • 价值易变性:数据资产时刻受到数据容量、数据时效程度、应用场景等因素的影响,与其他无形资产相比,其价值更易发生变化。
  • 战略性:一切数据业务化,一切业务数据化,具有战略性。

4.3数据资产管理

数据资产管理(Data Asset Management)是指规划、控制和提供数据及信息资产的一组业务职能,包括开发、执行和监督有关数据的计划、政策、方案、项目、流程、方法和程序,从而控制、保护、交付和提高数据资产的价值。数据资产管理需要充分融合业务、技术和管理,以确保数据资产保值增值。

数据资产管理(Data Asset Management)一般来说包括统筹规划、管理实施、稽核检查和资产运营四个主要阶段,贯穿数据采集、存储、应用和销毁整个生命周期全过程。企业管理数据资产就是对数据进行全生命周期的资产化管理,促进数据在“内增值,外增效”两方面的价值变现,同时控制数据在整个管理流程中的成本消耗。

image

图2.数据资产管理过程

数据资产管理(Data Asset Management)包括两个重要方面,一是数据资产管理的核心管理职能;二是确保这些管理职能落地实施的保障措施,包括战略规划、组织架构、制度体系等。

五数据管理、数据资源管理与数据资产管理内涵的演进

数据管理、数据资源管理与数据资产管理有着密切关系和关联,但随着现代数字技术的高速发展,三者在内涵、侧重、延伸等方面存在差异。

image

图3.数据管理、数据资源管理与数据资产管理的关系

5.1

数据资产内涵

在数据资产化的大背景下,数据资产管理是在数据管理基础上的进一步发展,可以视作数据管理的升级版,主要区别在以下三个方面:

一是数据管理的视角不同,数据资产管理强调数据是一种资产,基于数据资产的价值、成本、收益开展全生命周期的管理。

二是管理职能有所不同,数据资产管理包含数据模型、元数据、数据质量、参考数据和主数据、数据安全等传统数据管理职能,同时整合数据架构、数据存储与操作等内容,将数据标准管理纳入管理职能,并针对当下应用场景、平台建设情况,增加了数据价值管理职能。

三是管理要求有所升级,在“数据资源管理转向数据资产管理”的理念影响下,相应的组织架构和管理制度也有所变化,需要有更专业的管理队伍和更细致的管理制度来确保数据资产管理的流程性、安全性和有效性。

5.2三者的关系

  • 数据管理指利用计算机硬件和软件技术对数据进行有效的收集、存储、处理和应用的过程。数据管理目标:在于充分有效地发挥数据的作用。
  • 数据资源管理致力于发展处理企业数据生命周期的适当的建构、策略、实践和程序。数据资源目标:去寻找手段,以有效的控制数据资源,并提升数据资源的利用率。
  • 数据资产管理的核心思路是把数据对象作为一种全新的资产形态,并且以资产管理的标准和要求来加强相关体制和手段。从经济角度,满足对资产运营的各类管理要求。

5.3数据资产管理三个关键变革

  • 数据与企业设备、软件、人才一样成为企业的重要资产,可以从多个角度和多个层面为企业带来价值收益。
  • 数据资产管理除了包含传统以数据质量提升为目标的数据治理外,还包括挖掘数据价值的数据运营。
  • 数据资产管理不能仅仅依靠信息部门开展,需要企业自上而下各个部门之间的分工协作。

结论

本文对数据、数据管理、数据治理、数据资源管理、数据资产管理等内涵作了详细说明,便于读者更好的理解和掌握数据领域相关概念,最后总结两点:

一、数据资源将成为战略资产,而有效的数据治理才是数据资产形成的必要条件。二、有效的数据治理是一个持续性的过程,也是逐步实现数据价值的过程。所以数据治理是企业信息化的基石,数据资产是企业战略发展的核心价值,数据管理为企业赋能。(鸣谢:蔡春久先生给予专业指导)

参考文献

[1].国家标准GB/T 36073-2018《数据管理能力成熟度评估模型》

[2].中国信息通信研究院云计算与大数据研究所CCSA TC601大数据技术标准推进委员会《数据资产管理实践白皮书(4.0)》

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,185评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,445评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,684评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,564评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,681评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,874评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,025评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,761评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,217评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,545评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,694评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,351评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,988评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,778评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,007评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,427评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,580评论 2 349

推荐阅读更多精彩内容

  • 项目管理术语英汉对照表2018-7-20 A Abstract Resource 抽象资源 Abstraction...
    007明_阳阅读 6,148评论 0 51
  • 大数据:技术、产业与管理研究报告 一、四次产业革命 18世纪中叶以来,人类历史上先后发生了三次工业革命,发源于西方...
    帝京故梦阅读 1,798评论 1 4
  • 1 引言 在信息化的时代,特别是如今与大数据相关的研究和应用层出不穷,数据已经成为各个单位最重要的资产,国务院也于...
    数据智能谷阅读 12,720评论 1 5
  • 2018.5.2 星期三 晴 今天语文又测试了,成绩还可以,书写也还算工整。数学测试卷也发下来了,我接...
    周一成长日记阅读 250评论 2 5
  • 1.今天去寄快递,有个阿姨进门就说:老板,我来让你赚钱啦。老板听后和她两个人笑得特别开心。想到自己总是说贵贵的,也...
    廷酱Ceeport阅读 218评论 0 0