1、数据管理发展史
从数据管理到数据治理到数据资产管理,从全球到国内,各种新概念不断提出并被加以实践改良,提升了政府、企事业单位及群众对大数据资产管理的意识,同时也促进了大数据产业不断的深入发展。
2、国外数据管理模型简介
20世纪80年代后期,数据仓库概念开始形成,这也是数据管理理论的萌芽。随着数据仓库应用落地和展开,在2000年左右数据治理的相关理念也逐步形成。2000年前后,H.Watson探讨了“数据仓库治理”在Blue Cross和Blue Shield of North Carolina两家公司的最佳实践,被国内学者认为拉开了“数据治理”在企业管理中的大幕。
2004年,国际数据治理协会DGI就首次发布了DGI数据治理框架,从这个框架模型初步提出了RPP(人员/流程/规则)框架。
但是,这个框架中没有对数据治理的具体工作内容给予细化或明确说明。
2006年,国际数据管理协会(DAMA)发布了数据管理框架,并参考了PMBOK的架构编写了数据管理指南(DMBOK)
经过多次迭代,2008年3月,国际数据管理协会发布的最新版DMBOK。
2010年,IBM发布了《数据治理统一流程》一书,描述了企业数据能力成熟度评价模型。
IBM提出数据治理的要素模型,认为数据风险与合规、价值创造等业务目标或成果是数据治理的核心关键命题,并且影响这些目标的达成需要组织结构和认知度、政策、数据相关责任者三个促成要素。在三个促成因素以外,必须关注数据治理三个核心要素,分别是数据质量管理、信息生命周期管理、信息安全和隐私。要素模型中还有数据治理三个支撑要素,数据架构、分类与元数据、审计日志和报告。
2014年,EDM发布了数据管理能力成熟度模型( Data management Capability Assessment Model )。
企业数据管理协会(EDM Council)是北美地区的一个主要面向金融保险行业数据管理的公益性组织,在数据内容标准制定、数据管理最佳实践等方面有丰富的经验,是业界的倡导者和领导者。组织内部的成员大部分都是数据管理行业和金融保险行业的企业。在该模型中,EDM将数据管理划分为八大职能域:
2014年,CMMI协会发布了数据管理成熟度模型,将数据管理工作分为六个维度:
3、国内数据管理模型
《GB/36073-2018数据管理能力成熟度评估模型》
2018年3月29日,“2018全国大数据标准化工作会议暨全国信标委大数据标准工作组第五次全会”在北京国际会议中心召开。会议上《大数据标准化白皮书》(2018)进行了重磅发布,并且针对国内首个数据管理领域的国家标准《数据管理能力成熟度评估模型》全国首批试点机构进行签约仪式。
《GB/36073-2018数据管理能力成熟度评估模型》是我国数据管理领域首个正式发布的国家标准。用来帮助和指导相关组织单位定位数据管理等级、加强数据管理能力,提升数据资产价值,同时对数据管理从业人员进行培训,提升数据管理和应用的技能,规范和指导大数据整体行业的高效、有序发展。该标准在研制阶段,分别针对金融、通讯、能源、传媒等行业进行了大量的试验验证;为了验证科学合理性,还在全国范围内进行数据管理能力调研并形成《数据管理能力成熟度调研报告》,为各地方主管部门、行业主管机构以及企业提供了高质量的数据辅佐及参考。
4、国内外管理模型差异
数据管理能力成熟度模型(data management capability maturity model,DCMM)与以上2个模型最大的差异在于它既吸收了行业公认的部分,又结合了国内数据发展的现实情况,增添了“数据标准”“数据安全”和“数据应用”3个独立的能力项。
数据标准
国外的数据管理相关工作中对于数据标准的强调非常少, DAMA数据管理知识体系指南(DAMA guide to the data management body of knowledge,DMBOK)、DMM或者DCAM等文件中都没有关于数据标准的内容,而在国内恰恰相反,在国内很多行业,特别是银行、政府等行业在开展数据治理的过程中,往往会首先制定各自的数据标准。2017年是我国的标准化大年,面对诸多的数据孤岛,数据开放、共享、融合是当前要务,强调数据标准就是强调夯实数据的基础。
数据安全
随着数据在单位之间的流动性越来越高,特别是《中华人民共和国网络安全法》的发布和执行,数据安全和隐私的保护也引起了大部分单位的重视,国家也在制定数据安全相关的标准,为此,DCMM也把数据安全作为数据能力的一个重要维度,意图通过评估来提升各单位的数据安全能力状况。
数据应用
数据应用是数据资产价值体现的重要方式,也是数据管理的重要目标,国内很多单位也把数据管理和数据应用放在统一的团队中进行开展,同时也可以通过数据应用来保证数据管理工作的针对性,更利于体现数据管理工作的价值。