如何在大数据时代构建数据治理体系
2023-数据治理体系实施步骤解决方案V2-1

数据治理体系实施步骤解决方案V2随着大数据时代的到来,企业所面临的数据管理和治理问题变得越来越复杂,因此建立一个完善的数据治理体系已经成为企业面对挑战的首要任务。
本文将从以下几个方面介绍数据治理体系的实施步骤解决方案V2。
第一步:明确目标和需求在数据治理体系实施之前,企业需要先明确自己的具体目标和需求,以此来建立适合自己企业的治理体系。
在这个阶段,企业需要做好以下几点:1.明确数据治理的具体目的以及需要达成的目标,例如提升数据质量、统一数据格式等;2.识别需要治理的数据类型和数据源;3.做好合规性要求的考虑,比如国家和行业相关的法规政策。
第二步:建立数据治理体系建立适合企业的数据治理体系是数据治理的重要一环。
在此阶段,可以参考开源的数据治理框架或进行自主研发,从而建立一套适应企业实际情况的数据治理系统。
第三步:落地执行数据治理体系的建立只是第一步,真正落实到业务实践之中才是实施的关键。
因此,在数据治理体系的实施之中,需要注意以下几点:1.对数据质量的监管和治理;2.整合数据资源,使数据具有高度的准确性和一致性,保证数据的即时性;3.对数据的安全性进行加密和保护,避免因网络攻击或数据泄露而导致的风险;4.定期评估和优化数据治理体系的效果。
第四步:交叉协作和知识共享数据治理体系的实施需要不同部门和团队之间的交叉协作和信息共享,因此在此阶段需要建立一个良好的沟通渠道。
这些渠道可以包括一些实时的交流平台,在这其中,组织可以分享最佳实践和数据治理策略,促进所涉及到的团队之间的知识共享。
第五步:数据治理文化塑造数据治理的实施还需要伴随着相应的文化建设,这对企业来说非常重要。
通过对整个数据治理体系的剖析分析,组织可以不断塑造更加基于数据的文化氛围,从而确保数据治理得到全面而可靠的实施。
综上所述,数据治理体系的实施需要注意许多细节,但这也是为了确保治理程序的严谨和可靠性。
在建立一个数据治理体系的过程中,组织应该全面考虑数据治理的方方面面,并积极采取措施进行推广、持续改进和优化。
数据治理制度体系建设-概述说明以及解释

数据治理制度体系建设-概述说明以及解释1.引言1.1 概述概述数据治理是指在组织中对数据资源进行有效而持续性的管理和控制的过程。
随着大数据时代的到来,企业和组织面临着海量的数据产生和积累,如何高效地管理和利用这些数据已经成为一个亟待解决的问题。
数据治理制度体系的建设旨在通过建立规范、标准和流程,确保数据的完整性、一致性和可用性,从而提高数据的质量和价值,为组织的决策和业务发展提供可靠的支持。
本文将详细介绍数据治理制度体系的建设,并探讨其意义、基本要素、建设步骤以及实施和监督等方面内容。
首先,文章将解释数据治理的概念和意义,明确数据治理的核心目标和作用。
其次,将介绍数据治理的基本原则,包括数据责任、数据质量、数据安全、数据合规和数据价值等方面。
然后,将论述数据治理的重要性和必要性,分析在数据治理不完善或缺失的情况下可能带来的风险和影响。
最后,将探讨数据治理的挑战和难点,如数据分散、数据标准化、数据共享和隐私保护等问题。
通过对数据治理制度体系的建设意义的分析,本文旨在引起读者对数据治理的重视,并提供一些实践经验和建议,帮助组织建立健全的数据治理制度体系。
数据治理制度体系的基本要素和建设步骤将为读者提供一个系统化的指导,以便组织能够根据自身情况有针对性地进行数据治理的建设工作。
最后,文章将介绍数据治理制度体系的实施和监督,指出落实数据治理制度体系的重要性,并探讨如何进行有效的监督和评估。
通过本文的阅读,读者将了解到数据治理制度体系的建设对于组织的重要性,明确数据治理的核心概念和原则,并掌握相关的实施步骤和建设要点,为组织的数据管理和治理提供有力的支持。
数据治理制度体系的建设是一个长期的过程,需要组织的高层重视并付出持续的努力,但它也是组织成功应对数据挑战和实现数据驱动决策的关键。
1.2 文章结构:本文主要围绕数据治理制度体系建设展开讨论。
文章将分为三个主要部分,每个部分都探讨了数据治理制度体系在不同方面的重要性和必要性。
大数据治理体系构建方法论框架研究

大数据治理体系构建方法论框架研究一、概述随着信息技术的飞速发展,大数据已经成为当今社会的重要资源,其应用范围日益广泛,价值日益凸显。
大数据的复杂性、多样性和动态性等特点也给数据治理带来了前所未有的挑战。
构建一套科学、系统、实用的大数据治理体系成为当前亟待解决的问题。
大数据治理体系构建方法论框架的研究,旨在探索大数据治理的理论基础、实践路径和操作方法,为政府、企业和社会各界提供有效的数据治理方案。
该框架从大数据的特点和需求出发,结合数据治理的基本原则和最佳实践,提出了一套包括治理目标、治理原则、治理组织、治理流程、治理技术和治理评价在内的完整治理体系。
通过构建大数据治理体系构建方法论框架,可以实现对大数据资源的有效管理和利用,提升数据质量和数据安全,促进数据共享和开放,推动数据价值的最大化。
该框架还可以为数据治理的标准化和规范化提供指导,促进数据治理领域的发展和创新。
本文将从理论框架、实践路径、技术支撑和案例分析等方面对大数据治理体系构建方法论框架进行深入探讨,以期为大数据治理的实践提供有益的参考和借鉴。
1. 大数据时代的背景与意义随着信息技术的飞速发展,人类社会正逐步迈入大数据时代。
大数据以其海量的数据规模、快速的数据流转、多样的数据类型和价值密度低但商业价值高的特点,深刻改变着人们的生活方式、工作模式和思维模式。
在这一时代背景下,大数据治理体系的构建显得尤为重要,它不仅是应对数据爆炸式增长、提升数据处理能力的关键,更是推动数字经济发展、提升国家竞争力的重要举措。
大数据时代的到来为各行各业提供了前所未有的发展机遇。
通过深入挖掘和分析大数据,企业可以更加精准地把握市场需求,优化产品设计和服务模式,提高经营效率。
大数据在医疗、教育、交通等领域的应用也在不断拓宽,为人们提供更加便捷、高效的服务体验。
大数据的发展也带来了一系列挑战和问题。
数据的快速增长使得传统的数据处理方法难以满足需求,数据质量参差不齐、数据孤岛现象严重等问题也制约了大数据价值的充分发挥。
大数据时代的数据管理体系建设

大数据时代的数据管理体系建设摘要:新时期下,随着大数据技术水平的不断提升,数据的应用价值也越来越高,因此对数据进行规范化管理意义重大。
为确保数据的管理更加高效,应该依托于大数据时代背景,明确数据管理的含义,分析数据管理期间面临的各类问题,并在掌握成因的基础上采取行之有效的方式,科学对数据管理体系加以建设,确保可以为数据资产的管理与应用提供必要支持。
关键词:大数据时代;数据管理体系;建设引言:基于数字经济时代下,数据的作用越来越大,虽然数据在资产负债表中没有显示具体的数值计量,在其潜在价值和作用很大,需要加强对数据的规范化管理。
数据管理的目的是要确保组织机构数据资产能得到有效管控,提升数据资源的使用率。
随着云计算等先进技术手段的大力发展,企业信息系统也得到了全面优化,但技术的发展并不能确保数据物尽其用,数据的潜在价值无法被充分挖掘,因此需要加强对数据管理体系的构建。
1数据管理的概念和内涵所谓的数据管理,具体是将数据作为数据资源,通过对先进技术手段的利用,包括计算机技术等,让数据得到高效收集和存储,通过采取行之有效的方式加以处理,保证各类数据能得到科学分类和管控。
在早期的数据管理过程中,应用的方式大多为人工处理以及文件管理,借助管理信息系统来整合各类数据信息,以此发挥数据的作用,保证数据的安全和独立,让数据更为完整,提高数据的利用效率。
随着信息技术水平的不断提升,大数据时代的到来,使得数据管理发生了很大改变,从以往单纯针对数据应用过程的数据管理转变为数据生命周期的多维度管理。
在数据管理方面,除了包含业务管理职能之外,规范管理也是重要的内容,包括设计规范的制定、数据标准等,但最为关键的还是要有专业的数据管理队伍支撑。
在数据治理职能方面,能对其他数据管理职能有效指导和管控,保证各职能权责能得到深入落实。
在数据治理过程中,与数据管理的整个过程息息相关,目的是要确保所得到的数据更为可靠真实,实用性强,促进数据质量的提高,以便数据在存储过程中能始终处于安全环境。
大数据治理体系的实施方案

大数据治理体系的实施方案首先,建立完善的数据管理机制是大数据治理体系的重要组成部分。
企业应当明确数据的来源、采集、存储、处理和使用规范,建立统一的数据管理流程和标准,确保数据的合规性和安全性。
同时,应当配备专业的数据管理团队,负责制定数据管理策略、监督数据使用情况,并及时进行数据质量的监控和改进。
其次,数据安全是大数据治理体系的关键环节。
企业应当建立健全的数据安全管理体系,包括数据加密、访问权限控制、数据备份与恢复等措施,确保数据在采集、传输、存储和处理过程中不受到恶意攻击和泄露风险。
同时,应当加强员工的数据安全意识培训,提高员工对数据安全的重视程度,减少人为失误导致的数据安全问题。
另外,数据质量的保障也是大数据治理体系的重要内容。
企业应当建立完善的数据质量管理机制,包括数据清洗、去重、校验、标准化等环节,确保数据的准确性、完整性、一致性和时效性。
同时,应当利用先进的数据质量管理工具和技术手段,对数据进行全面的监控和评估,及时发现和解决数据质量问题,提高数据的可信度和可用性。
最后,大数据治理体系的实施还需要注重数据合规性和伦理性。
企业在数据采集、使用和共享过程中应当遵守相关的法律法规和行业规范,保护用户隐私和数据安全,防止数据被滥用和泄露。
同时,应当建立健全的数据治理政策和伦理准则,明确数据的所有权和使用权限,推动数据共享和开放,促进数据资源的可持续利用和创新发展。
综上所述,建立完善的大数据治理体系对于企业在大数据时代更好地管理和利用数据资源至关重要。
企业应当从数据管理机制、数据安全、数据质量和数据合规性等方面着手,全面提升数据治理能力,为企业的发展和决策提供有力支持。
希望本文的实施方案能够为企业在大数据治理方面提供一定的参考和帮助。
大数据时代的数据治理

大数据时代的数据治理随着科技的不断发展,我们的生活中都离不开数据。
在这个数据迅速增长的时代里,大数据成为了各行业的关键因素之一,而数据治理也变得尤为重要。
因此,大数据时代的数据治理也成为了许多企业和组织迫切需要面对的问题。
一、大数据时代的数据治理概述数据治理是一种管理和监督数据相关事务的过程,旨在确保数据管理的质量和价值。
在这个过程中,数据被分类、评价和批准,然后被监控、保存、维护和优化。
在大数据时代,数据治理是由数据分析、评估、批准和管理等一系列流程构成的综合性过程,数据治理的核心目的是通过数据的质量、可用性、准确性和一致性提高组织的信息资源管理能力。
数据治理的过程包括数据收集、数据存储、数据管理、数据安全、数据分析和数据共享等多个维度。
在进行数据治理的过程中,企业应建立从数据收集到数据应用全流程的数据管理规范,包括数据的源头、传输、存储、处理和使用等方面。
二、大数据时代的数据治理挑战由于大数据时代的数据规模、速度、种类和来源都十分复杂,因此数据治理也遇到了前所未有的挑战。
其中,最主要的挑战包括以下几个方面:1、数据隐私问题。
在数据采集和共享的过程中,个人隐私的泄露是令人担忧的问题。
在数据治理的过程中,要确保数据的安全、隐私和合法性,这对数据的收集、共享、存储和使用,都提出了更高的要求。
2、数据质量问题。
由于大数据量和多样性,数据的质量可能难以保证,经常出现数据不准确、重复、不完整等问题,影响了数据治理的效果。
3、数据保护问题。
在大数据时代,数据的保护是关键的问题。
在数据治理的过程中,企业必须确保数据受到保护,避免数据泄露和数据失控的情况发生。
三、建立一个有效数据治理体系面对大数据时代的三大挑战,建立一个有效的数据治理体系是关键。
将数据治理体系应用于实践中,可以帮助企业在数据的采集、分析、存储、共享、追踪和管理过程中进行规范并推进信息化和数字化。
1、明确数据治理的目标和意义在实施数据治理之前,企业应先明确数据治理的目标和意义,确保数据治理能够推进业务和组织管理的有效运转,帮助企业走上数字化转型之路。
数字化转型中的数据治理体系建设

数字化转型中的数据治理体系建设■吴新松摘要:数据治理是数字化转型的重要挑战,而数据治理体系的建设是数据治理的关键。
本文从数据治理的主要挑战入手,分析了数据治理的框架、过程和评估,给岀了数据治理体系建设的总体框图。
关键词:数字化转型;数据治理在互联网、云计算、大数据、人工智能等新一代信息技术创新发展的驱动下,我国经济社会持续向深度数字化转型,十四五规划纲要指岀“以数字化转型整体驱动生产方式、生活方式和治理方式变革”。
随着数字化转型的持续推进,数字化、网络化、智能化应用愈加广泛,应用内部沉淀的数据以及外部引入的数据日趋复杂,应用间的数据共享与交换需求纷繁多样,数据的质量、安全和价值挖掘己成为影响数字化转型的重要问题。
亟需厘清数据治理的深远意义,分析数据治理面临的主要挑战,研究数据治理体系的一般框架,认清数据治理的基本过程,加强数据治理的能力评估,有效提升数据治理的规范化水平。
一、数据治理的提出背景(一)数据的重要程度不断提高在数字化转型的大潮中,数据己经逐渐取代传统的IT基础设施和信息化应用成为企业发展的重要资产和新生动力。
正如经济学家汤姆•彼得斯(Tom Peters)所言“一个组织如果没有认识到管理数据和信息如同管理有形资产一样极其重要,那么它在新经济时代将无法生存”。
具体来说,数据的重要性体现在以下几个方面:(1)数据是企业的新无形资产无论数据是从企业自身业务系统中沉淀的,还是从外部公共资源中获得的,只要有商业价值,那么数据就可以赋予未来的权益,并且应该被认为是一种资产。
如果数据资产被交换和交易,它的价值就会增加到所有各方。
同时,多源数据聚集和跨组织、跨领域的深度融合挖掘将大大增加数据的价值。
(2)数据可有效辅助企业决策对企业掌握的内部数据和外部数据进行综合分析,可以有效总结经验、发现规律和预测趋势,为企业决策者提供辅助决策服务。
同时,在企业经营活动中有效地管理和使用数据可以减少或消除经营活动中的潜在风险,给企业带来相关的经济效益和社会效益。
在大数据时代如何打造高效的数据治理体系

在大数据时代如何打造高效的数据治理体系随着信息技术的飞速发展,大数据已经成为各行各业的重要资源和资产。
然而,大数据的快速增长也带来了数据管理和治理方面的挑战。
为了更好地利用和保护数据资源,建立高效的数据治理体系显得尤为重要。
本文将探讨在大数据时代如何打造高效的数据治理体系,以应对数据管理的挑战。
一、建立明确的数据治理架构在构建高效的数据治理体系时,首先需要建立明确的数据治理架构。
数据治理架构应该包括数据治理的组织结构、职责分工、决策机制等内容。
通过明确各级管理者和员工在数据治理中的职责和权限,可以有效地协调各方合作,提高数据治理的效率和质量。
二、制定完善的数据治理政策和流程制定完善的数据治理政策和流程是建立高效数据治理体系的关键步骤。
数据治理政策应该包括数据采集、存储、处理、共享、安全等方面的规定,确保数据的合规性和安全性。
同时,建立规范的数据治理流程,包括数据质量管理、数据安全管理、数据共享管理等环节,提高数据治理的效率和可控性。
三、采用先进的数据治理技术工具在大数据时代,数据量庞大、类型多样,传统的数据治理方法已经无法满足需求。
因此,采用先进的数据治理技术工具是打造高效数据治理体系的必然选择。
例如,数据质量管理工具可以帮助企业实时监控数据质量,及时发现和解决数据质量问题;数据安全管理工具可以加密数据、监控数据访问权限,保护数据安全等。
四、建立数据治理的监督和评估机制建立数据治理的监督和评估机制是确保数据治理体系高效运行的重要保障。
通过定期对数据治理政策和流程进行评估,发现问题并及时改进;同时,建立数据治理的监督机制,监控数据治理的执行情况,确保数据治理政策得到有效执行。
五、加强数据治理的人才培训和意识普及数据治理的高效运行离不开专业的人才和全员的参与。
因此,加强数据治理的人才培训和意识普及是打造高效数据治理体系的重要环节。
通过培训员工数据治理的理念和方法,提高员工的数据治理意识和能力;同时,建立数据治理的奖惩机制,激励员工积极参与数据治理工作。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
如何在大数据时代构建数据治理体系随着云计算、物联网、移动互联网等新一代信息技术的快速发展,人类产生的数据量呈指数级增长。
据资料显示,2012年,全球数据量达到2.8ZB,预计到2020年,全球数据量将达到40ZB。
大数据蕴含着巨大的价值,如今众多企业已将数据视作企业的宝贵资产。
然而,数据价值密度与数据总量成反比。
面对巨大的数据规模,如何管理和利用数据,使其发挥价值是企业必须考虑的重要问题。
大数据的价值所在使其面临着隐私和安全方面的威胁。
大数据治理将组织的部门、流程、人等元素与数据的整个生命周期联系在了一起,对企业数据管理和数据资产价值有着至关重要的作用。
《DGI数据治理框架》一文将数据治理定义为“数据相关事务的决策和授权的执行”,并进一步解释为信息处理过程决策权和职责的策略,约定了由谁负责处理哪些信息,并在什么情况下采用哪种方法,以及何时来执行。
首先,大数据治理是信息治理计划的一部分,这是其定位。
这就要求组织在制订信息治理框架时,必须将大数据纳入其中,比如在信息治理委员会中增加数据科学家,在信息治理目标中增加大数据治理目标等。
其次,大数据治理主要是数据处理的一系列相关政策的制订,这是其内涵。
再次,必须优化大数据,这是大数据治理的重点。
最后,大数据必须变现,这是大数据治理的目的所在。
大数据体量大、种类繁多,且价值密度低,组织必须对其进行优化,比如定义元数据、净化大数据、实施数据生命周期管理等。
看似没有任何价值的单一数据集合在一起时,会发现新的价值,这是大数据价值体现的重要途径之一。
而大数据价值的体现往往会涉及数据的隐私,这就要求组织在进行大数据价值体现时,必须注重大数据的隐私处理。
组织将数据视作其资产的一种,要将其转化成组织可以使用的现金,而变现的方式可以是单纯地出售数据本身,也可以是利用数据开发新业务。
一、企业实施大数据治理的必要性1、企业实现数据资源在组织内部的共享和交换的需要目前,大部分工业企业已经完成了ERP、CRM、供应链、协同办公等企业信息化系统的建设,但是由于数据分散在众多系统中,缺乏统一的数据定义和数据分类,因此在数据使用上存在数据不标准、数据不一致、数据完整性差等问题。
数据不标准主要表现在不同系统之间描述同一业务实体的数据定义标准不同;数据不一致主要表现在相关联业务系统的数据不同步、各应用系统间存在数据编码规则不一致的问题,还有重复编码的问题;数据完整性差表现为缺少数据实体的关键信息。
企业必须对各个系统的数据源以及输出的数据资产进行统一的数据治理,实现数据在不同组织和系统内的交换与共享。
只有解决了数据问题,才能实现IT价值。
2、提升海量数据资源质量的需要大数据时代数据产生的价值越来越大,各企业都在探索基于大数据的相关技术和应用模式,最终目的就是挖掘数据的价值,推动企业的发展。
因为数据有可能是成本,也有可能是资产,能给企业带来重要的价值,是企业宝贵的资源。
如果没有数据治理,数据的质量就无法保证,数据难以成为企业的资产,既使再多的业务和技术投入也都是徒劳。
数据质量低下会导致企业在IT方面的重复投入,各种应用系统的价值难以有效地发挥出来,数据的问题甚至会使得企业错失商机,损失无法估量。
数据治理是保证数据质量的必需手段,数据治理的价值贡献在于确保数据的准确性、可获取性、安全性、适度分享和合规使用。
例如,可以对数据服务涉及的计算资源、数据资源制定标准化的统一管理规范,制定涵盖主数据、数据主题、数据质量、数据安全、数据共享等数据标准体系及数据管理体系。
3、数据驱动企业进行科学决策的需要当今世界进入了数据爆炸的时代,数据成为企业重要的资产。
企业涉及的数据类型,包括文本、图像、音频、视频等,分为静态数据和动态数据,实时数据和非实时数据,结构化数据、半结构化数据和非结构化数据,这些数据有些来源于企业的内部信息系统及设备,有些来源于外部的供应链和社交网络。
数据驱动企业的决策成为时代发展的必然。
数据治理能使企业清楚地认识自己的优势和劣势,有利于企业提高决策的合理性,为用户提供更加优质的服务。
大数据时代,企业可以通过对数据的整合和分析,从中获取对企业有用的数据。
新的数据技术手段,使得信息在企业内部不同部门之间有效、快速地传递,使得不同部门之间的交流、沟通更加透明,使得企业不同的利益主体能广泛地参与决策,从而提高决策的科学性和合理性。
4、企业整合数据资源提升竞争力的需要在企业的生产经营活动中会产生大量的数据,企业需要对事务性数据、机器生成数据、社交媒体数据等内外部数据进行整合,特别是对与企业重大商业利益相关的数据资源的整合、分析与利用,从而指导企业的经营与发展。
数据技术带来的不仅是技术的更新,还有管理方式的改变,数据治理不仅局限在企业的决策层,还包含管理层和业务层,数据治理能改善企业管理层与其他利益相关者的关系,使企业变得更加敏捷和高效,更注重用户体验的提升和需求的满足。
例如,为解决日常的数据收集、数据处理效率较低、数据不一致的问题,可以通过元数据管理系统,建立采集元数据和元数据关系,提升跨系统的数据交互能力以及数据整合能力,进一步提升企业的核心竞争力。
二、企业大数据治理现状伴随着大数据时代的到来,企业由于早期在信息系统构建中缺乏统一的全局规划,使得其在当前数据治理体系的构建中存在着一系列的问题,如果不能有效对这些问题进行解决,以构造出完善的数据治理体系,势必会对未来企业的发展带来不利的影响。
1、大数据时代的定义及特征(1)大数据时代的定义我国已经进入了数字经济时代,必然会产生大量数据,大数据主要是指人们在日常工作、生产、生活中通过数字化的方式进行呈现和存储。
也可以很通俗地将大数据理解成为巨大的数据信息,而伴随着人们的各种需求的不断增加,这种数据量还在不断的增加。
举例来说,人们通过计算机互联网对视频和新闻的观看,都不同程度地促进了大数据时代的快速形成。
(2)大数据时代的特征大数据时代具有如下几个明显的特征:数据量大。
这是大数据时代最为突出的特征,这也是大数据时代本来就是基于大量数据信息所产生的是分不开的。
速度很快。
正是由于大量数据的产生,需要不断提升信息数据处理速度,才能跟上大数据时代的要求,而如果数据处理速度难以跟上,就不能满足信息的快速传播和扩散。
种类很多。
伴随着大数据时代的到来,计算机互联网技术在人们的生活中获得了非常广泛的应用,也使得数据来源变的更加丰富,相应地,数据的种类也变的更多。
2、大数据时代企业数据治理现状在大数据时代下,企业在数据治理体系的构建过程中,主要面临着如下几个突出的问题:(1)数据定义的缺失所谓数据定义的缺失,就是企业的部分业务源系统以及外部数据源缺少关键业务元素定义。
这是因为企业系统开发建设的出发点大多以满足客户业务交易为主要目标,对于统计分析涉及的数据要素项的定义不够关注,因此造成部分业务源系统和外部数据源的数据定义不完备。
在这种情况下,就很容易造成企业的不同部门有着不同的理解,甚至在对同一个字段的理解也会产生很大的歧义。
(2)数据标准的差异我国企业的早期信息化建设过程中,其业务源系统相对是比较分散的,很少有从全局的角度进行考虑,也就使得信息孤岛的现象比较突出,也带来了有关系统的物料、客户、供应商、会计科目、指标数据的不一致。
正是由于企业在数据标准之间的差异,也使得各个信息系统之间的数据很难有效进行共享,也带来了企业的信息资源利用效率难以跟上实际需求,伴随着大数据时代的到来,更加使得挑战进一步扩大。
(3)数据更新的滞后在大数据时代下,虽然企业为了满足各个系统与外部数据的内部访问,都提升了访问效率,减少手工数据传输,相同的信息经常会在不同系统之间进行冗余存放,不过由于对数据的更新滞后,很容易带来冗余数据的不一致,继而产生了数据质量的问题,这也是在企业在数据治理中应该重点关注的问题。
(4)数据管控程度不高企业大数据建设的最终目标是促进企业对于数据应用,最大程度发挥数据价值。
因此,在当前企业大数据的治理中,人们普遍重视数据应用,围绕应用中出现的数据关联、质量管理、业务协同等进行数据治理,而忽视数据治理体系中的管理机制、控制能力以及安全与隐私保护等。
(5)数据治理机制不健全在大数据环境下,数据治理的主体趋于多元化,即一个数据治理流程往往需要多方参与。
例如,在数据质量管理中,问题数据的发现、反馈、修正是一个多方参与的闭环流程,参与方包括:企业数据中心(数据治理方)、数据源头单位(数据提供方)、数据用户(数据使用方)等。
这种多方协同治理的业务模式,对企业大数据治理制度和流程机制提出了更高要求。
(6)技术支撑能力不足企业大数据治理体系的技术支撑需要涵盖大数据管理、存储、质量、共享与开放、安全与隐私保护等多个方面,当前相应的技术研究关联性和系统性还存在欠缺,都是侧重于点,而在整体上将技术关联起来还有问题。
具体来说,以金融或电信运营商行业为典型代表的传统数据治理技术,是以基于主数据、元数据、数据规范的数据仓库管理系统,可实现特定领域和类型的应用级数据质量管理。
但无法满足企业大数据环境下的海量、异构、多源、全格式(结构化、半结构化和非结构化)数据的治理需求。
三、企业大数据治理成熟度评估1、大数据治理模型基于以上分析,只有更好的评估企业大数据治理成熟度,才能更好的指导企业大数据治理的建设。
根据实践可以将大数据治理模型理解为人与组织、策略和能力的三维架构。
人与组织是数据治理的主体,涉及企业中的各个职能部门及分子等,他们分别承担着不同的治理职责。
策略是大数据治理的工具,能力是大数据治理的手段。
下图所示为大数据治理模型三维架构。
具体来说,人与组织包含利益相关者、治理委员会、管理委员会和内部员工。
利益相关者指组织内部和外部环境中受组织决策和行动影响的任何相关者,数据的产生者、管理者、使用者和监督者等;治理委员会是组织治理数据的最高机构,负责作出数据相关事务的决定,并将数据治理标准和措施汇报给数据的利益相关者;管理委员会负责具体实施治理委员会制定的各项数据治理决定,并将数据治理结果汇报给治理委员会;内部员工是数据治理架构中不可或缺的一部分,贯彻执行数据治理委员会和管理委员会制定的各项数据治理策略。
策略是组织制定的所有与大数据有关的数据优化、隐私保护和数据变现的准则和规范,包括组织数据治理的使命和愿景、治理指标、数据治理规则和定义、权利与职责、控制措施。
数据治理的使命和愿景包括数据治理的整体目标,给予数据利益相关者持续与跨界的数据保护和服务,不合规准则引发的问题的解决方案等;数据成熟度评估是企业大数据治理状态和能力的一种衡量方式。
大数据治理模型共三个维度,具体涵盖14个评价指标。
每个指标分别以5个等级来衡量其成熟度,然后再统筹考虑评价指标权重,得到组织大数据治理的整体成熟度评价。