初探数据分析能力成熟度模型
初探数据分析能力成熟度模型
发表时间：2018-08-10T16:09:11.453Z 来源：《科技中国》2018年6期作者：元绍华
[导读] 摘要：大数据分析技术在各行各业得到了广泛的应用，但目前业界普遍缺少一个统一的、权威的、适应现代数据分析要求的专业标准。本文首先介绍了大数据领域能力成熟度模型发展现状，接着阐释建立数据分析能力成熟度模型的必要性，最后尝试提出数据分析能力成熟度模型的能力项和四个等级。
摘要：大数据分析技术在各行各业得到了广泛的应用，但目前业界普遍缺少一个统一的、权威的、适应现代数据分析要求的专业标准。本文首先介绍了大数据领域能力成熟度模型发展现状，接着阐释建立数据分析能力成熟度模型的必要性，最后尝试提出数据分析能力成熟度模型的能力项和四个等级。
1.引言
近年来，大数据相关研究与应用层出不穷，很多行业开始利用大数据分析技术支撑业务决策、指导业务发展，数据应用的广度从单一内部数据逐渐发展为多源内部数据，一些互联网企业已提前进入多源内外部数据综合应用的阶段，在应用深度上，数据分析的地位从辅助业务决策逐渐融入生产系统，甚至成为业务发展的驱动力量。但与此同时，数据分析能力成熟度模型的缺失，使后进企业对自身数据分析能力难以形成清晰定位，容易在提升自身数据分析能力时迷失方向。
2.大数据领域能力成熟度模型发展现状
在大数据领域，当前的能力成熟度模型建设主要集中在数据能力成熟度模型上，且尚未形成统一、权威的专业标准，所以一些组织在借鉴软件能力成熟度模型的基础上提出各自的数据能力成熟度模型，用以规范、指导具体的数据生产过程的数据管理，比较著名的有以下三个[1]。
2.1.SEI的数据能力成熟度模型（DMM）
DMM（Data Management Maturity）模型是由卡耐基-梅隆大学旗下机构CMMI研究所以能力成熟度模型整合的各项基础原则为基础开发的。包含六大职能域：数据管理战略、数据质量管理、数据操作、数据平台和机构、数据治理、支撑流程。
2 .2.EDM的数据管理能力成熟度模型（DCAM）
DCAM（The DataManagementCapability Model数据管理能力成熟度模型）是由EDM Council主导，组织金融行业企业参与编制和验证，基于众多实际案例的经验总结来进行编写的。主要分为八个职能域：数据管理策略、数据管理业务案例、数据管理程序、数据治理、数据架构、技术架构、数据质量、数据操作。
2.3.我国的数据能力成熟度评价模型（DCMM）
数据能力成熟度评价模型（Data Capability Maturity Model 简称DCMM）是国内关于数据能力成熟度模型的一项国家标准，由全国信息技术标准化技术委员会于2014年启动编制工作，在制定过程中充分吸取了国内先进行业的发展经验（以金融业为主），结合了国际上DAMA（国际数据管理协会）《数据管理知识体系指南DMBOK》中的内容，并根据中国国内数据管理的实际情况，定义了数据能力评估的八大过程域：数据战略、数据治理、数据架构、数据标准、数据安全、数据应用、数据质量、数据生命周期管理等。
3.建立数据分析能力成熟度模型的必要性
从当前大数据领域能力成熟度模型发展现状可以看出，现有能力成熟度模型主要期望在以下方面为企业的数据管理提供帮助。
规范和标准化企业数据管理方面的专业术语。
规范和标准化企业数据管理方面职能域的划分。
明确数据管理方面相关的工具集、技能集。
帮助企业准确评估目前的现状、差距和发展方向。
帮助企业理解数据治理的组织架构需求。
建立数据管理方面相关的最佳实践。
另一方面，大数据的价值主要体现在数据服务、数据分析和数据探索上[2]，广义来说，这三类价值均可理解为数据分析。数据治理处于数据分析的上游，所有数据治理工作都是为了更好地开展数据分析工作而服务。因此有必要建立数据分析能力成熟度模型，以对现有大数据领域能力成熟度模型形成补充，一方面可引导企业开展数据分析工作时充分利用前期数据治理的成果，另一方面可以对企业的数据分析能力进行统一评价，便于帮助后进企业查明问题、找到差距、指出方向，并提供实施建议。
4.数据分析能力成熟度模型的等级划分
本文认为，数据分析能力成熟度模型是指对企业开展数据分析能力进行评价的标准。即从企业实现收益、控制风险和优化资源的基本诉求出发，确立数据分析的目标以及实现这些目标所应具备的要素，要素按特性划分为若干能力项，每个能力项基于证据进行评价得出其成熟度，单个能力项成熟度经加权计算后得到数据分析能力成熟度。
大数据分析主要分为简单分析和智能化复杂分析两大类，前者常用SQL语句来完成一些统计和查询工作，后者通常需要使用基于机器学习和数据挖掘的智能化复杂分析实现[3]。本文认为，根据面向的问题域不同，结合数据广度和应用深度，可将数据分析能力成熟度模型分为四个等级，成熟度越高，所解决问题的价值也越大。
4.1.数据统计级
该级别为数据分析能力成熟度模型中最基础的级别，其问题域聚焦于“发生了什么”。该等级的数据分析，通过对过去一段时间、一定范围内所发生的事实进行记录，并按照一定规则生成数据报表，以满足有限范围内的业务需求，如结论描述、过程展示等。
4.2.多维分析级
该级别的数据分析，问题域聚焦于“为什么会发生”。主要依托多维分析技术和数据可视化技术，通过对以多维形式组织起来的数据进行上卷、下钻、切片、切块、旋转等各种分析操作，深入剖析数据，使分析者、决策者能从多个角度、多个侧面观察数据库中的数据，从而深入了解包含在数据中的信息和内涵。
4.3.预测性分析级
该级别的数据分析，问题域聚焦于“会发生什么”。主要通过关联分析、聚类分析、时序分析等各种算法，找到数据之间的潜在关系，