元数据管理-实用
数据治理中的元数据管理策略
数据治理中的元数据管理策略随着社会信息化的不断深入，数据也成为了各个企业发展的核心。
不断收集、处理、分析数据，成为了企业信息化发展的重要环节。
然而，随着数据多样化的增加，采集和管理数据也面临着许多挑战，如何对数据进行有效的管理和治理已经成为了各个企业在信息化领域迫切需要解决的问题之一。
其中，元数据管理作为数据治理的重要组成部分，也越来越引起企业的重视。
元数据是一种描述数据的数据，例如对于某一数据表，元数据可以描述它的数据类型、数据的来源、数据的更新时间等信息。
元数据的管理不仅可以帮助企业对数据进行有效的描述和管理，还可以提高数据的质量以及数据的价值。
针对这一问题，本文在总结了目前国内外对于元数据管理的研究成果和实践经验的基础上，提出了一些元数据管理策略，以期为企业的数据治理提供一些有益的借鉴。
一、元数据管理的重要性在现代企业信息化中，元数据的管理已经成为企业信息化建设过程中必不可少的一部分。
元数据管理对于企业数据治理起到了至关重要的作用。
以下是几个方面的重要性：1、提高数据质量在数据管理过程中，元数据可以描述数据的来源、数据的格式、数据的更新时间等基本信息，同时也可以对数据的适用范围、数据生命周期进行详细描述。
这些描述可以帮助企业更好地管理与维护这些数据，从而提高数据的质量。
2、提高数据可靠性元数据可以描述数据标准和数据规范，将数据标准和数据规范对应到数据本身上，对数据进行描述和解耦，在数据分析之前，确保数据的可靠性，有效提高数据处理的准确性和可靠性。
3、加快决策的速度管理好元数据后，可以根据元数据快速查找到所需数据，提高数据使用效率。
并且，元数据可以帮助企业快速获取数据，根据数据进行决策分析。
从而加速企业决策效率，提高企业的竞争力。
二、元数据管理策略元数据管理在不同的企业中，可能会有不同的策略，但是需要注意以下几点：1、确定元数据管理团队元数据管理需要专业的技能和知识，所以需要专门组建一个元数据管理团队，负责组织、制定元数据标准以及元数据管理的流程和规范等工作。
元数据管理方案
元数据管理方案1.1元数据抽取为了简化元数据生成工作，系统提供自动生成元数据的功能，即元数据抽取。
通过元数据自动抽取，用户可以方便、快捷地获得大量的元数据信息。
1.1.1抽取的对象元数据抽取主要针对的对象有以下几种：已有目录：已建业务应用系统中现有的目录资源。
数据库：各种数据库资源，包括关系型数据库、XML数据库等。
格式化电子文件：电子文件，例如Word、PDF、XLS等文件。
1.1.2元数据抽取的流程元数据抽取的流程有4个主要步骤，分别为：数据源信息获取：解决要从哪个数据源获得元数据的问题。
内容/结构分析：解决要从数据源中获得哪些元数据的问题。
元数据提取：解决如何从数据源中获取元数据的问题。
存储入库：解决元数据存储的问题。
1.1.3电子文档的元数据抽取对于电子文档，首先各部门的文档格式不尽相同，另外它们的安全级别也各不相同，同时由于信息化建设水平的不一致，有的部门文档分散在各处，有的部门文档是集中存放的，甚至已经建立了完善的电子系统进行管理。
针对以上状况，对于电子文档的元数据抽取需要进行以下的抽取流程：整理归档对于分散在各处的电子文档(纸质文档需要先进行电子化处理)，必须由专人进行统一整理，根据公开共享的前提进行集中，这种集中可以是物理上集中的，也可以是逻辑上集中的。
但要满足以下原则，第一根据安全级别，便于外界访问；第二便于文档的增量发布；第三便于采集工具的自动化采集编目。
各部门只有在文档完全整理归档的情况下，进行自动化采集才是切实可行的。
在整理归档的时候，各部门根据各自情况进行归档，没有必要千篇一律，也没有必要制定繁琐和呆板的规则，只要能够满足以上的原则即可。
●根据安全级别，建立相应的访问机制由于受到安全级别的限制，所以对于需要共享的数据要进行安全方面的限制，限制的手段可以有：用户名/密码、数字证书、物理隔断等等，根据实际情况建立安全访问机制，做到重要信息不泄露，不丢失。
●编目处理现阶段，主流格式的电子文档，主要包含：word、excel、ppt、pdf等。
元数据管理办法
元数据管理办法1 总则为了规范和加强集团的元数据管理，提升数据标准化与数据管控能力，持续改善数据质量，配合《集团BIM运营管控数据治理办法》，制定本办法。
本办法所称元数据，是数据的数据，是数据的业务涵义、技术涵义和加工处理过程的定义，是数据管控的基本手段。
元数据可将其按用途的不同分为业务元数据、技术元数据和操作元数据：1.1 业务元数据主要描述数据业务涵义及应用场景，包括业务及业务延伸定义、业务规则定义，以及数据之间关系、数据所属部门等业务相关信息；1.2 技术元数据主要描述数据的技术涵义，包括数据库的结构、字段长度、汇总算法、数据库操作系统及服务器名称、版本等技术相关信息；1.3 操作元数据主要描述数据的加工处理过程，包括源系统名称、源系统类型、目标系统名称、目标系统类型、抽取转换频率、转换规则等操作相关信息。
本办法所称元数据管理，是指元数据的定义、收集、管理和发布的方法、工具及流程的集合。
元数据管理旨在针对数据全生命周期的各个环节，清晰、完整地勾勒出数据资产的血缘关系视图。
2元数据管理的组织与职责2.1决策机构集团数据治理委员会负责元数据管理的决策，具体职责包括：2.1.1 审批元数据管理相关办法；2.1.2 对元数据管理工作的重大事项和争议事项进行决策；2.1.3 定期听取集团数据治理办公室对元数据管理工作的汇报。
2.2 集团数据治理办公室是元数据管理的责任单位，负责元数据管理工作，具体职责包括：2.2.1 元数据管理办法的制定、解释和监督；2.2.2 负责组织、推动和协调元数据管理相关工作，包括元数据采集与检核、元数据发布与维护、元数据使用、元数据变更；2.2.3 及时采集和维护业务元数据和各信息系统的技术和操作元数据；2.2.4检核和监控元数据落地和变更情况；2.2.5 制定元数据管理整改方案，推动元数据管理问题解决；2.2.6 总结元数据管理工作，并定期向集团数据治理委员会汇报。
2.3集团各职能部门或由产业、成员企业代行相关职能的单位作为数据的业务主管部门和使用部门，应对其所拥有的业务元数据进行定义与维护，具体职责包括：2.3.1 协助集团数据治理办公室采集业务元数据；2.3.2 明确业务规则，制定数据标准，定义业务元数据；2.3.3 负责本部门业务元数据的日常维护，确保相关信息系统的业务元数据完整和有效；2.3.4 提出业务元数据变更申请并配合变更工作。
数字图书馆建设中的元数据标准与管理
数字图书馆建设中的元数据标准与管理数字图书馆是一种通过数字化技术将图书馆资源进行整合、保存和管理的新型图书馆形态。
在数字图书馆的建设中，元数据的标准与管理起着至关重要的作用。
本文将探讨数字图书馆建设中元数据标准与管理的相关内容，包括元数据的定义、分类、标准制定、管理方法等。
首先，我们来阐述元数据的定义。
元数据是描述数据的数据，它是对数字资源进行描述、组织和管理的重要手段。
元数据可以包括资源的基本信息（如标题、作者、出版日期等）、内容信息（如主题、摘要等）、结构信息（如文件格式、文件大小等）以及使用信息（如版权信息、访问权限等）。
通过对数字资源添加元数据，可以方便用户在数字图书馆中进行检索、浏览和利用资源。
其次，我们来探讨元数据的分类。
根据元数据的属性和用途，可以将元数据分为描述性元数据、技术性元数据和管理性元数据三种类型。
描述性元数据用于描述资源的内容，如作者、标题、关键词等；技术性元数据用于描述资源的特征和属性，如文件格式、文件大小等；管理性元数据用于管理资源的访问权限、版权信息等。
不同类型的元数据在数字图书馆建设中发挥着不同的作用，合理分类和管理元数据有助于提高数字图书馆的资源利用效率。
第三，我们来讨论元数据标准的制定与应用。
元数据标准是对元数据进行描述、存储和交流的规范。
通常采用的元数据标准有Dublin Core、MARC、MODS等。
其中，Dublin Core是最为广泛应用的元数据标准之一，它定义了15个元素，用于描述资源的基本属性。
MARC（机器可读目录）是图书馆界常用的元数据标准，适用于对图书和其他资源的描述。
MODS（元数据对象描述语言）是一种XML-based的元数据标准，它融合了Dublin Core和MARC的特点，适用于描述各类数字资源。
选择合适的元数据标准并合理应用于数字图书馆建设中，有助于提高数字资源的描述和检索效率。
此外，元数据管理也是数字图书馆建设中的重要环节。
元数据管理实施方案
元数据管理实施方案————————————————————————————————作者：————————————————————————————————日期：元数据管理方案1.1元数据抽取为了简化元数据生成工作，系统提供自动生成元数据的功能，即元数据抽取。
通过元数据自动抽取，用户可以方便、快捷地获得大量的元数据信息。
1.1.1抽取的对象元数据抽取主要针对的对象有以下几种：已有目录：已建业务应用系统中现有的目录资源。
数据库：各种数据库资源，包括关系型数据库、XML数据库等。
格式化电子文件：电子文件，例如Word、PDF、XLS等文件。
1.1.2元数据抽取的流程元数据抽取的流程有4个主要步骤，分别为：数据源信息获取：解决要从哪个数据源获得元数据的问题。
内容/结构分析：解决要从数据源中获得哪些元数据的问题。
元数据提取：解决如何从数据源中获取元数据的问题。
存储入库：解决元数据存储的问题。
1.1.3电子文档的元数据抽取对于电子文档，首先各部门的文档格式不尽相同，另外它们的安全级别也各不相同，同时由于信息化建设水平的不一致，有的部门文档分散在各处，有的部门文档是集中存放的，甚至已经建立了完善的电子系统进行管理。
针对以上状况，对于电子文档的元数据抽取需要进行以下的抽取流程：整理归档对于分散在各处的电子文档(纸质文档需要先进行电子化处理)，必须由专人进行统一整理，根据公开共享的前提进行集中，这种集中可以是物理上集中的，也可以是逻辑上集中的。
但要满足以下原则，第一根据安全级别，便于外界访问；第二便于文档的增量发布；第三便于采集工具的自动化采集编目。
各部门只有在文档完全整理归档的情况下，进行自动化采集才是切实可行的。
在整理归档的时候，各部门根据各自情况进行归档，没有必要千篇一律，也没有必要制定繁琐和呆板的规则，只要能够满足以上的原则即可。
●根据安全级别，建立相应的访问机制由于受到安全级别的限制，所以对于需要共享的数据要进行安全方面的限制，限制的手段可以有：用户名/密码、数字证书、物理隔断等等，根据实际情况建立安全访问机制，做到重要信息不泄露，不丢失。
第12章元数据管理-DAMA-DMBOK：数据管理知识体系（第二版）
第12章元数据管理-DAMA-DMBOK：数据管理知识体系（第⼆版）第⼗⼆章元数据管理1.简介元数据的最常见定义，“关于数据的数据”，很容易引起误解。
可以归类为元数据的信息种类繁多。
元数据包括有关技术和业务流程，数据规则和约束以及逻辑和物理数据结构的信息。
它描述了数据本⾝（例如，数据库，数据元素，数据模型），数据表⽰的概念（例如，业务流程，应⽤程序系统，软件代码，技术基础结构）以及数据和概念之间的连接（关系）。
元数据可帮助组织了解其数据，系统和⼯作流程。
它可以进⾏数据质量评估，并且是数据库和其他应⽤程序管理的组成部分。
它有助于处理，维护，集成，保护，审核和管理其他数据。
要了解元数据在数据管理中的重要作⽤，请想象⼀个⼤型图书馆，其中有成千上万的书籍和杂志，但没有卡⽚⽬录。
没有卡⽚⽬录，读者甚⾄可能不知道如何开始寻找特定的书甚⾄特定的主题。
卡⽚⽬录不仅提供必要的信息（图书馆拥有的书籍和材料以及在何处被搁置），还使读者可以使⽤不同的起点（主题区域，作者或标题）来查找材料。
没有⽬录，很难甚⾄不可能找到⼀本书。
没有元数据的组织就像没有卡⽚⽬录的图书馆。
元数据对于数据管理和数据使⽤都是必不可少的（请参阅DAMA-DMBOK中对元数据的多个引⽤）。
所有⼤型组织都会产⽣和使⽤⼤量数据。
在整个组织中，不同的个⼈将具有不同级别的数据知识，但是没有⼀个⼈会了解有关数据的所有知识。
此信息必须记录在案，否则组织可能会失去有关⾃⾝的宝贵知识。
元数据提供了捕获和管理有关数据的组织知识的主要⽅法。
但是，元数据管理不仅是知识管理⽅⾯的挑战，⽽且还存在许多挑战。
这也是风险管理的必要。
元数据对于确保组织可以识别私有数据或敏感数据以及为⾃⼰的利益管理数据⽣命周期以及满⾜合规性要求并使风险最⼩化是必不可少的。
没有可靠的元数据，组织将不知道它拥有什么数据，数据代表什么，它起源于何处，它如何在系统中移动，谁可以访问它，或者对⾼质量数据意味着什么。
元数据管理制度
元数据管理制度一、引言随着信息技术的发展和数据量的爆炸增长，元数据管理在企业中变得越来越重要。
元数据是描述数据的数据，是数据的关键资产。
合理管理元数据可以提高数据质量、管理数据资产，以及支持企业数据治理和决策。
本文将阐述元数据管理的重要性、管理原则、管理方法和操作流程，以及具体的管理制度。
二、元数据管理的重要性1.促进数据共享和集成：元数据是数据的描述，通过管理元数据可以促进数据共享和集成。
当各部门和系统都遵循同一种元数据标准时，数据的集成会更加容易，各方之间可以更好地共享数据。
2.提高数据质量：元数据管理可以帮助企业建立数据质量标准和规范，确保数据质量始终如一。
通过元数据管理，可以更好地了解数据的来源、含义、结构和关系，从而提高数据的准确性、完整性和一致性。
3.支持数据治理和决策：元数据是数据的关键抽象，通过管理元数据可以更好地了解数据资产、数据风险和数据价值。
有了清晰的元数据，企业可以更好地制定数据治理策略、做出数据决策，并支持企业的业务目标。
4.降低数据管理成本：随着数据量不断增长，数据管理的成本也在增加。
通过合理管理元数据，可以减少数据管理的成本，提高数据管理效率，降低风险。
5.促进数据分析和挖掘：元数据可以帮助用户更好地了解数据的结构和关系，为数据分析和挖掘提供支持。
通过元数据管理，可以更快、更准确地进行数据分析和挖掘，挖掘出数据背后的价值。
三、元数据管理原则1.一致性原则：元数据管理应该遵循一致性原则，即各部门和系统都应该使用同一种元数据标准，以确保元数据的一致性和准确性。
2.全面性原则：元数据管理应该是全面的，涵盖所有数据资产，包括结构化数据、非结构化数据、半结构化数据等，确保所有数据都受到管理。
3.及时性原则：元数据管理需要及时更新和维护，随着数据的不断变化，元数据也需要不断更新和调整，以保持元数据的准确性和时效性。
4.安全性原则：元数据管理需要确保元数据的安全性和机密性，防止元数据被未经授权的访问和篡改，保护数据资产的安全。
元数据管理研究报告
一．什么是元数据元数据是：• 数据的数据(data about data)• 结构化数据(Structured data about data)• 用于描述数据的内容（what）、覆盖范围（where, when）、质量、管理方式、数据的所有者（who）、数据的提供方式（how）等信息，是数据与数据用户之间的桥梁；• 资源的信息(Information about a resource)• 编目信息(Cataloguing information)• 管理、控制信息（Administrative information)• 是一组独立的关于资源的说明（metadata is a set of independent assertions about a resource ）data that defines and describes other data （ISO/IEC 11179-3:2003(E)）简单地说，元数据是数据仓库数据本身信息的数据（data about data）。
针对于数据仓库的元数据是描述数据仓库内数据的结构和建立方法的数据，可将其按用途的不同分为两类：技术元数据（Technical Metadata）和业务元数据（Business Metadata）。
技术元数据是存储关于数据仓库系统技术细节的数据，是用于开发和管理数据仓库使用的数据，它主要包括以下信息：•数据仓库结构的描述，包括仓库模式、视图、维、层次结构和导出数据的定义，以及数据集市的位置和内容；•业务系统、数据仓库和数据集市的体系结构和模式；•汇总用的算法，包括度量和维定义算法，数据粒度、主题领域、聚集、汇总、预定义的查询与报告；•由操作环境到数据仓库环境的映射，包括源数据和它们的内容、数据分割、数据提取、清理、转换规则和数据刷新规则、安全（用户授权和存取控制）。
业务元数据从业务角度描述了数据仓库中的数据，它提供了介于使用者和实际系统之间的语义层，使得不懂计算机技术的业务人员也能够“读懂”数据仓库中的数据。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
Metadata Object Browser and Graphical Reports
Role based dashboards and Metadata Reports
SuperGlue Warehouse
Presentation Server
SG Console Win NT, 2000, XP
SG Integration Repository
CWM Class MetaModel
Warehouse Integration Repo
REPOSITORIES
- Oracle 8.1.7, 9.2.0.1 and above, 10g - SQL Server 2000 SP3 - DB2 UDB 8.x EE/EEE
谁需要元数据
业务专家
数据仓库项目管理控制
架构师
如：定义项目范围、控制 项目风险、评估不同系统 集成时产生的影响（影响 分析）……元数据
项目经理
分析人员
开发人员
业务经理
谁需要元数据
业务人员
架构师
项目架构设计
元数据 如：了解多个业务系统的结 构、关联关系，数据转换规 则设计…..
分析人员
开发人员
项目经理 业务经理
SG Integration Repository
CWM Class MetaModel
SERVERS
PC 7.1.1 Integration Server
PA 4.1.1 Apps Server
[Browser IE 6.0 using : iPlanet 6.0, IIS 6.0 OR Apache 1.3]
Informatica Metadata Manager
Metadata XConnects
Metadata Sources
PowerCenter Integration Server
SuperGlue Warehouse
Presentation Server
Metadata Object Browser and Graphical Reports
PC 7.1.1 on : NT, SOLARIS HP Unix, IBM AIX (PC supported versions)
BEA WL 6.1 SP4 on : - NT 4.0 SP5, NT 2000 SP2, Win 2003 - SOLARIS 7.0, 8.0 - HP Unix 11.0, 11i - IBM AIX 4.3, 5.1
数据仓库基础 厂商解决方案 数据集成技术 数据仓库建模 数据展现分析 谈元数据管理 项目开发管理
元数据管理工具
Informatica MetaManager DAG MetaCenter IBM MetaStage Oracle OWB CA Decisionbase Transformer ……
元数据
▪ MDC的开放信息模型
• 分析与设计（Analysis and Design） • 对象与组件（Object and Component） • 数据库与数据仓库（Database and Warehousing） • 业务工程（Business Engineering） • 知识管理（Knowledge Management）
元数据的存储区
数据仓库元数据结构图
元数据管理示意图
元数据 数据库
源数据
暂存区
EDW
（ODS+DW+DM）
connections
前端工具
Informatica Metadata Manger
Metadata XConnects
Metadata Sources
PowerCenter Integration Server
技术元数据
业务元数据
谁需要元数据
业务专家
业务定义
如：某销售指标不正确，找出
销售指标的计算方法及计算项
来源……
架构师
元数据
项目经理
分析人员
开发人员
业务经理
ห้องสมุดไป่ตู้
谁需要元数据
业务专家 分析人员
架构师
元数据
需求分析定义 如：分析指标定义、报表 定义、数据来源定义
开发人员
项目经理 业务经理
谁需要元数据
业务专家
▪ OMG组织的CWM模型
• UML • MOF（元对象设施） • XMI（XML元数据交换）
元数据的重要性
▪ 及时发现系统变化 ▪ 找出需要调整的ETL程序 ▪ 给出仓库中数据和指标的来源及规则 ▪ 调整仓库的数据模型 ▪ 促进项目组成员的沟通 ▪ 监控数据质量 ▪ 采用元数据跟用户确认新的需求
Websphere 5.1 on : - NT 4.0 SP5, NT 2000 SP2, Win 2003 - SOLARIS 7.0, 8.0 - IBM AIX 4.3, 5.1
Metadata Object Browser and Graphical Reports
Role based dashboards and Metadata Reports
SG Console
SG Integration Repository
CWM Class MetaModel
Win NT, 2000, XP
XCONNECTS
Databases
Design Tools
- Oracle 8.1.7, 9i, 10g - SQL Server 2000 - Sybase 12.x - TERADATA V2 R5 - DB2 UDB 7.1,7.2,8.1 EE/EEE - IBM Informix 9.2
不同开发小组之间的交流
架构师
如：DBA工程师与ETL工程师
DBA工程师与BI工程师
…..
元数据
项目经理
分析人员
开发人员
业务经理
谁需要元数据
业务专家
业务管理与信息消费
如：数据分析、业务决策、 给前系统提出架改构师进建议，对 数据仓库系统二期、三期提 出更多的业务需求
元数据
项目经理
分析人员
开发人员
业务经理
Informatica Metadata Manager
Metadata Sources
SG Console Win NT, 2000, XP
Metadata XConnects
PowerCenter Integration Server
SuperGlue Warehouse
Presentation Server