《数据资产管理实践白皮书3.0》
《《数据资产管理实践白皮书3.0》》由会员分享,可在线阅读,更多相关《《数据资产管理实践白皮书3.0》(110页珍藏版)》请在读根文库上搜索。
1、版权声明本白皮书版权属于中国信息通信研究院云计算与大数据研究所、CCSA TC601 大数据技术标准推进委员会,并受法律保护。转载、摘编或利用其它方式使用本白皮书文字或者观点的,应注明“来源:数据资产管理实践白皮书(3.0)”。违反上述声明者,作者将追究其相关法律责任。I编委会编委会成员:魏凯、姜春宇、刘成成、闫树、丁华明、张娟、赵计博、车春雷、郭宝生、蓝曾威、马卓佳、李慧、贾丕星、符山、陈涛、周庭宇、孙龙君、农益辉、刘天斯、钱岭、齐骥、侯志强、石在辉、刘童桐、吴嘉、张振、张长君、林锋、周万、王鹏、刘庆会、胡浩、蔡春久、王琤、骆阳、魏民、李雨霏、于辰涛、王晟、陈志凌、刘俊良、周刚、王军、李今朝
2、、李岳璘、王伟哲、曹冬平、蓝海、邹素雯、董喆、熊威、刘浩、施红明、白梅、寇新华、蒋勇、高伟参与单位:中国信息通信研究院、中国支付清算协会金融科技专委会、中国建设银行、中国电信股份有限公司云计算分公司、中软国际有限公司、腾讯科技(深圳)有限公司、中国移动苏州研发中心、中国移动通信研究院、中国电信股份有限公司、杭州数梦工场科技有限公司、普元信息技术股份有限公司、北京飞利信科技股份有限公司、联想(北京)有限公司、成都四方伟业软件股份有限公司、北京东方金信科技有限公司、烽火通信科技股份有限公司石化盈科信息技术有限责任公司、北京数语科技有限公司、国网征信有限公司、航天恒星科技有限公司、广州信安数据有限公
3、司II前 言党的十九大报告提出要“推动互联网、大数据、人工智能和实体经济深度融合”,进一步突出了大数据作为国家基础性战略性资源的重要地位,掌握丰富的高价值数据资源日益成为抢占未来发展主动权的前提和保障。数据是资产的概念已经成为行业共识。然而现实中,对数据资产的管理和应用往往还处于摸索阶段,数据资产管理面临诸多挑战。首先,大部分企业和政府部门的数据基础还很薄弱,存在数据标准混乱、数据质量层次不齐、各条块之间数据孤岛化严重等现象,阻碍了数据的共享应用。其次,受限于数据规模和数据源种类的丰富程度,多数企业的数据应用刚刚起步,主要集中在精准营销,舆情感知和风险控制等有限场景,应用深度不够,应用空间亟待
4、开拓。再其次,由于数据的价值很难评估,企业难以对数据的成本以及其对业务的贡献进行评估,从而难以像运营有形资产一样管理数据资产。国际上,1990 年以来,以国际数据管理协会(DAMA,Data Management Association International)、能力成熟度模型集成(CMMI, Capability Maturity Model Integration)为代表的组织机构长期从事数据管理的研究,形成了一定的理论成果。在这些理论的指导下,我国金融、电信、能源、互联网等信息化较为先进的行业,已经积累了丰富的数据资产管理经验。这些经验的总结对于补充完善数据管理理论体系、推进数据资产
5、管理在各个行业的普及和发展有着重要意义。为了促进数据资产管理的研究,我们组织编写了数据资产管理实践白皮书。本白皮书分为四大部分:第一部分介绍了数据资产管理的概述及变革中的数据资产管理呈现出来的特征趋势;第二部分从III实践角度出发阐述了数据资产管理的主要内容;第三部分重点介绍了数据资产管理的实施步骤、实践模式、工具平台和成功要素;最后结合实践经验,介绍了电信、金融、政务、医疗和工业等相关领域的数据资产管理案例。本白皮书在数据资产管理实践白皮书 2.0的基础上,结合原有的数据资产管理八大痛点内容,以全面盘点数据资产、不断提升数据质量、实现数据互联互通、提高数据获取效率、保障数据安全合规、数据价值
6、持续释放等角度,通过权威数据和典型事件,生动剖析了数据资产管理的重点内容和目标。以“管理职能”代替“活动职能”的描述,在原有管理职能的介绍下,尝试说明数据资产管理内容之间的关系,并在组织机构和制度体系的基础上,完善了保障措施部分。此外,还在原有通用实施阶段步骤的基础上,增加了实践模式的参考。最后,增加了“持续迭代完善,形成良性闭环”成功要素的观点。本白皮书可以为政府和企业开展数据资产管理工作提供参考,也可以作为相关产品和服务提供商的参考依据。由于时间仓促,水平所限,我们的工作还有很多不足。下一步,我们还将广泛采纳各方面意见建议,进一步深化相关研究,持续完善白皮书内容,在已有版本的基础上,适时修
7、订发布新版。我们诚邀各界专家学者参与我们的研究工作,积极献言献策,共同完善国内数据资产管理理论和方法论体系,为促进大数据与实体经济深度融合做出积极贡献。如您有意愿,请联系我们:liuchengcheng。IV目 录版权声明I前 言III图 表 目 录VII一、数据资产管理概述1(一)数据资产管理的定义与内涵11. 数据资产管理的概念12. 数据资产管理的内涵23. 数据资产管理的演变3(二)数据资产管理是大数据时代的必修课4(三)数据资产管理是各方关注的重要议题7(四)变革中的数据资产管理91. 数据对象纷繁复杂92. 处理架构更新换代103. 组织职能升级变迁104. 管理手段自动智能115
8、. 应用范围不断扩大11二、数据资产管理的主要内容12(一)管理职能121. 数据标准管理122. 数据模型管理133. 元数据管理154. 主数据管理165. 数据质量管理186. 数据安全管理197. 数据价值管理208. 数据共享管理21(二)保障措施231. 制定战略规划232. 完善组织架构243. 建立制度体系264. 设置审计机制275. 开展培训宣贯28三、数据资产管理的实施要点29(一)实施步骤291. 第一阶段:统筹规划302. 第二阶段:管理实施313. 第三阶段:稽核检查314. 第四阶段:资产运营32(二)实践模式33(三)软件工具341. 数据标准管理工具352.
9、数据模型管理工具36V3. 元数据管理工具374. 主数据管理工具385. 数据质量管理工具396. 数据安全管理工具407. 数据生命周期管理工具41(四)成功要素421. 明确责权利标,有效推进管理422. 合理引进技术,提升治理能力433. 着眼业务应用,释放数据价值434. 加强数据合规,注重风险风控445. 持续迭代完善,形成良性闭环44四、总结与展望46附录一:术语48附录二:数据资产管理的实践案例51(一)中国电信集团公司大数据资产管理案例51(二)中国移动省公司大数据资产管理案例59(三)中国保信保险业务数据资产管理案例65(四)基于数据模型的证券期货行业数据资产管理案例70(
10、五)“云上贵州”政务数据资产管理案例74(六)某省政务大数据资产管理案例78(七)某大型医药公司数据资产管理案例86(八)某大型钢铁集团公司数据资产管理案例90(九)湖北省物价数据资产管理案例94VI图 表 目 录表 1 数据资产价值评估典型方法比较20表 2 数据资产管理组织架构角色职责25表 3 不同组织方式的数据资产管理典型实践模式34表 4 不同建设策略的数据资产管理典型实践模式34图 1 数据资产管理在大数据体系中的定位2图 2 大数据背景下的数据资产管理特点特征9图 3 数据资产管理体系架构12图 4 数据资产管理内容之间的关系22图 5 数据资产管理保障措施组织架构24图 6 数
11、据认责机制26图 7 一种典型的制度体系架构27图 8 数据资产管理实施方法论30图 9 三段八步法61图 10 某省政务大数据资产汇聚架构图80图 11 某省政务数据汇聚主题模型80图 12 某省政务数据资产治理架构图81图 13 某省政务数据资产应用架构图82图 14 数据资产管理流程图91图 15 多元化数据集成91图 16 原始检测数据实时采集92图 17 钢材合格预测模型92图 18 物价大数据平台总体架构示意图95VII中国信息通信研究院&CCSA TC601数据资产管理实践白皮书(3.0 版)(2018)一、 数据资产管理概述数据成为资产,已经是行业共识,甚至有人建议将数据计入资
12、产负债表。但如果对比实物资产,对数据资产的管理,还处于非常原始的阶段。往往一个机构针对其数据资产类别和数量都缺乏全面了解,数据质量、数据安全、资产评估、资产交换交易等精细管理、价值挖掘和持续运营则更为薄弱。数据资产管理是现阶段推动大数据与实体经济深度融合、新旧动能转换、经济转向高质量发展阶段的重要工作内容。本章将阐述数据资产管理的定义与内涵,分析数据资产管理在大数据中的重要意义,并对数据资产管理在大数据发展中的趋势进行分析。(一) 数据资产管理的定义与内涵1. 数据资产管理的概念数据资产(Data Asset)是指由企业拥有或者控制的,能够为企业带来未来经济利益的,以物理或电子的方式记录的数据
13、资源,如文件资料、电子数据等。在企业中,并非所有的数据都构成数据资产,数据资产是能够为企业产生价值的数据资源。数据资产管理(DAM,Data Asset Management)是指规划、控制和提供数据及信息资产的一组业务职能,包括开发、执行和监督有关数据的计划、政策、方案、项目、流程、方法和程序,从而控制、保护、交付和提高数据资产的价值。数据资产管理是需要充分融合业务、技术和管理,来确保数据资产保值增值。1数据资产管理实践白皮书(3.0 版)(2018)中国信息通信研究院&CCSA TC6012. 数据资产管理的内涵数据资产管理在大数据体系中的定位如图 1 所示,它位于应用和底层平台中间。数据
14、资产管理包括两个重要方面,一是数据资产管理的核心管理职能,二是确保这些管理职能落地实施的保障措施,包括组织架构、制度体系。数据资产管理在大数据应用体系中,处于承上启下的重要地位。对上支持以价值创造为导向的数据应用开发,对下依托大数据平台实现数据全生命周期的管理。图 1 数据资产管理在大数据体系中的定位数据资产管理贯穿数据采集、应用和价值实现等整个生命周期全过程。企业管理数据资产就是通过对数据的生命周期的管理,提高数据资产质量,促进数据在“内增值,外增效”两方面的价值变现。数据先被规范性定义、创建或获得,然后存储、维护和使用,最终被销毁。数据的生命周期开始于数据获取之前,企业先期制定数据规划、定
15、义数据规范,以期获得实现数据采集、交付、存储和控制所需的技术能力。数据资产管理一般来说包括统筹规划、管理实施、稽核检查和资产运营四个主要阶段,详见第三部分数据资产管理的实施要点。2中国信息通信研究院&CCSA TC601数据资产管理实践白皮书(3.0 版)(2018)3. 数据资产管理的演变数据管理的概念是伴随上世纪八十年代数据随机存储技术和数据库技术的使用,计算机系统中的数据可以方便地存储和访问而提出的。国际数据管理协会( DAMA, Data Management Association International)在 2009 年发布的数据管理知识体系 DMBOK1.0中定义为规划、控制
16、和提供数据资产,发挥数据资产的价值。DAMA 数据管理体系将数据管理划分为 10 个领域,分别是数据治理、数据架构管理、数据开发、数据操作管理、数据安全管理、参考数据和主数据管理、数据仓库和商务智能管理、文档和内容管理、元数据管理和数据质量管理。2015 年,DAMA 在 DBMOK2.0 知识领域将其扩展为11 个管理职能,分别是数据架构、数据模型与设计、数据存储与操作、数据安全、数据集成与互操作性、文件和内容、参考数据和主数据、数据仓库和商务智能(BI,Business Intelligence)、元数据、数据质量等。在数据资产化背景下,数据资产管理是在数据管理基础上的进一步发展,可以视作
17、数据管理的升级版。主要区别可以从三方面看:一是从数据管理变成数据资产管理,在数据资产管理的概念下,强调的是紧紧围绕着把数据作为一种资产,基于数据资产的价值、成本、收益开展全生命周期的管理。二是管理职能有所调整,和 2015 年DAMA的管理职能相比,数据资产管理延用数据模型、元数据、数据质量、参考数据和主数据、数据安全等内容,整合数据架构、数据存储与操 The DAMA Guide to the Data Management Body of Knowledge3数据资产管理实践白皮书(3.0 版)(2018)中国信息通信研究院&CCSA TC601作等内容,将数据标准管理、数据生命周期管理纳
18、入管理职能,还针对当下应用场景、平台建设情况,将传统数据管理职能的具体内容进行了升级,增加了数据资产价值评估、数据资产运营流通两个管理职能。关于管理职能的描述详见第二章。三是管理要求有所升级,在“数据资源管理转向数据资产管理”的理念影响下,管理制度和组织架构也要有相应的变化,需要有更细致的管理制度和更专业的管理队伍来确保数据资产管理的流程性、严谨性和安全性。此外,业界也经常使用 “数据治理”、“数据管控”等说法。(二) 数据资产管理是大数据时代的必修课数据作为越来越重要的生产要素,将成为比土地、石油、煤矿等更为核心的生产资源,如何加工利用数据,释放数据价值,实现企业的数字化转型,是各行业和企业
19、面临的重要课题,然而数据的价值发挥面临重重困难。企业的数据资源散落在多个业务系统中,企业主和业务人员无法及时感知到数据的分布与更新情况,也无法进一步开展对数据加工工作。数据标准不统一,数据孤岛普遍存在导致业务系统之间的数据无法共享,资源利用率降低,降低了数据的可得性。标准缺失、数据录入不规范导致数据质量差,垃圾数据增多,数据不可用。数据安全意识不够、安全防护不足导致了数据泄露事件频发,危害了企业经营和用户利益。而且数据的价值难以评估,数据服务缺乏合规性的指导,阻碍了数据在企业内外的流动。数据资产管理主要解决数据面临的诸多问题,以体系化的方式实现数据的可用、好用,充分释放数据价值,具体来看有六个
20、方面的作用:4中国信息通信研究院&CCSA TC601数据资产管理实践白皮书(3.0 版)(2018)一是全面盘点数据资产。据 IDC 预测,全球数据总量预计 2020年达到 44 个 ZB,我国数据量将达到 8060 个 EB,占全球数据总量的 18%。2025 年全球大数据规模将增长至 163ZB,相当于 2016 年的 10倍,数据的规模越来越庞大。随着自然语言处理、图像识别、传感器等技术的不断发展,数据的种类越来越丰富,一个机构对他掌握的数据类型,缺乏全局管理视图。因此,数据资产管理的切入点是对数据家当进行全面盘点,形成数据地图,为业务应用和数据获取夯实基础。二是不断提升数据质量。早在
21、 1957 年的时候,计算机刚刚发明的时候,大家就意识到数据对于计算机决策的影响,提出 Garbage In Garbage Out的警示。2001 年,美国公布数据质量法案(Data Quality Act),提出提升数据质量的指导意见。2016 年,美国发布国家大数据战略,其中之一就是希望企业通过数据管理来提升数据质量,确保数据决策的可信性。糟糕的数据质量常常意味着糟糕的业务决策,将直接导致数据统计分析不准确、监管业务难、高层领导难以决策等问题。根据数据质量专家 Larry English 的统计,不良的数据质量使企业额外花费 15%到 25%的成本。数据能够被当作资产,并发挥越来越大的价
22、值,其前提是数据质量的不断提升。三是实现数据互联互通。传统的信息系统建设都是烟囱式的,各个部门各自存储数据,也缺乏数据跨部门共享的管理机制。据统计, 98%的企业都存在数据孤岛问题。造成数据孤岛的原因既包括技术上的,也包括标准和管理制度上的。在大数据时代,要实现数字化转 https:/en.wikipedia.org/wiki/Garbage_in,_garbage_out 5数据资产管理实践白皮书(3.0 版)(2018)中国信息通信研究院&CCSA TC601型,打破数据孤岛、实现数据互联互通不仅对于一个单一机构具有重要意义,对整个社会也具有深远意义。四是提高数据获取效率。一般来说,数据分
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 资产 管理 实践 白皮书
