元数据管理工具介绍-神州数码课件.ppt

1、1元数据管理工具介绍元数据管理工具介绍Metadata Manger（MM）高级咨询顾问：冷 鹏神州数码集成服务有限公司神州数码集成服务有限公司 2n元数据基础知识元数据基础知识nMMMM软件架构软件架构nMMMM软件特点软件特点n元数据应用案例元数据应用案例3元数据元数据(Metadata)定义定义元数据是描述数据的数据(Data about Data)。可理解为比一般意义的数据范畴更加广泛的数据，不再仅仅表示数据的类型、名称、值等信息，进一步提供了数据的上下文描述信息，比如数据的所属域、取值范围、数据间的关系、业务规则，甚至是数据的来源。在分析型项目中，元数据可以帮助DW管理员和DW开发人

2、员非常方便地找到他们所关心的数据 元数据是描述分析型应用内数据的结构、建立方法及流程的数据，可将其按用途的不同分为两类：技术元数据（Technical Metadata）和业务元数据（Business Metadata）。4这些问题真是头痛这些问题真是头痛已存在系统，有哪些关键业务数据？关键业务数据在不同系统的业务定义？同一实体在不同系统中的命名规则及其他属性一致？同一实体与本系统或其他系统对象是否存在依赖关系？具体的依赖关系描述是怎么样的？实体所有者是谁？谁作过修改或变更？一旦对象定义发生变化，其他开发团队会不会有影响？老板问，这张报表A指标值怎么算出来的？原始数据从哪得到的？公司要上市，要

3、审计公司信息化建设的健康程度，以什么为依据？总不能给人家看像山一样高的word或excel 文档吧？许多政策法规范要求数据透明（例如美国的萨班斯-奥克斯莱法案）以及专业行业协会（例如监督环境保护、食品与药物安全、劳动行为以及运输安全的行业协会）5元数据的使命元数据的使命是企业智能化信息建设的DNA提供一份数据定义和元素的详细示意图,有利于发现冗余的定义和元素企业元数据标准:减少数据冗余性,增加数据共享,使应用开发过程更有效费用更低、避免异构结构定义、提高不同工具之间定义的重复利用率帮助用户理解数据来龙去脉、关系及相关属性企业集成所必需的:：参照性、引用性、血缘分析、影响分析、变化分析。质量审计

4、：血缘分析支持需求变化：变更报告状态元数据有利于增强企业运营效率、规避错误及风险 有一点是不变的:利用数据解决企业问题的能力,仍然是企业赢利和取胜的关键有用的数据在哪里：好像在沙滩上寻找一粒沙子 答案：元数据6元数据现状元数据现状各自为战，所遵循的标准各异。各自为战，所遵循的标准各异。元数据管理元数据管理建模工具建模工具：ERwin PowerDesigner Rose Oracle Designer数据集成工具数据集成工具 PowerCenter DataStage SAS SagentBI 工具工具：BO Cognos MSTR 元数据源元数据源RDBMSEXCELCWM XML7元数据元

5、数据(Metadata)标准化标准化OMG(Object Management Group)是一个拥有500多会员的国际标准化组织，著名的CORBA标准即出自该组织。公共仓库元模型（Common Warehouse Metamodel）的主要目的是在异构环境下，帮助不同的数据仓库工具、平台和元数据知识库进行元数据交换。8CWM元模型的包结构元模型的包结构 仓库过程仓库操作转换XML记录型多维关系型资源业务信息软件发布UML 1.3(基础，行为元素，模型管理)对象(UML)OLAP分析数据挖掘信息可视化业务术语数据类型表达式键索引类型映射管理管理资源资源分析分析基础基础对象模型对象模型9n元数据

6、基础知识元数据基础知识nMMMM软件架构软件架构nMMMM软件特点软件特点n元数据应用案例元数据应用案例10Informatica Metadata Manager 体系结构体系结构SourcesTargetsBusinessIntelligenceMetadataMetadataMetadataCustomMetadataData ModelingMetadataMetadata ManagerMetadata11元数据体系结构元数据体系结构12Metadata Manager RepositoryMetadata Object Browser and Graphical ReportsPo

7、werCenter Integration ServerMetadata Manager WarehouseMetadata SourcesSG Integration RepositoryCWM Class MetaModelPresentation ServerMetadata XConnectsSG ConsoleRole based dashboards and Metadata ReportsGA 9/2/05Win 2000,2003,XPWarehouse Repo-Oracle 8.1.7,9iR2,10g-SQL Server 2000 SP3-DB2 UDB 8.1.5,8

8、.2 EE/EEEIntegration Repo-Oracle 8.1.7,9iR2,10g-SQL Server 2000 SP3-DB2 UDB 8.1.5,8.2 EE/EEE REPOSITORIES13PowerCenter Integration ServerMetadata Manager ServerMetadata Object Browser and Graphical ReportsMetadata Manager WarehouseMetadata SourcesSG Integration RepositoryCWM Class MetaModelPresentat

9、ion ServerMetadata XConnectsSG ConsoleRole based dashboards and Metadata ReportsSERVERSPC 8.5.1 Integration ServerPC 7.1.3 on:Windows,SOLARIS HP Unix,IBM AIX,RedHat Linux(PC supported versions)DA 8.5.1 Apps ServerBrowser IE 6.0 using:iPlanet 6.1,IIS 6.0 OR Apache 1.3,2.0BEA WL 8.1 SP4-Win 2000,Win 2

10、003-SOLARIS 8.0,9.0-HP Unix 11.0,11i-IBM AIX 5.1,5.2,5.3-RedHat Advanced Server 2.1,3.0Websphere 5.1.1.1 ND-Win 2000,Win 2003-SOLARIS 8.0,9.0-IBM AIX 5.1,5.2-RedHat Advanced Server 2.1,3.0JBOSS 3.2.1-Win 2000,Win 2003-SOLARIS 8.0,9.0-HP Unix 11.0,11i-IBM AIX 5.1,5.2-RedHat Advanced Server 2.1,3.0GA

11、9/2/05Win 2000,2003,XP14Metadata Manager XConnectMetadata Object Browser and Graphical ReportsPowerCenter Integration ServerMetadata Manager WarehouseMetadata SourcesSG Integration RepositoryCWM Class MetaModelPresentation ServerMetadata XConnectsSG ConsoleRole based dashboards and Metadata ReportsE

12、TL-PowerCenter 6.x,7.x*-PowerMart 6.x,7.x*BI-PowerAnalyzer 4.1.1,5.0.2-BOBJ 5.1.x,6.1.x-COGN Impromptu 7.0.x,7.1.x-COGN ReportNet 1.0,1.1-MSTR Designer 7.0,7.5.x-DB2 CubeViews 8.1-Hyperion Essbase OLAP 7.xCustom-CSV Files (using Custom Metadata Configurator)XCONNECTS*(on Oracle 8.1.7 and above,SQL S

13、erver 2000 SP3 and DB2 8.x EE/EEE and above)Databases-Oracle 8.1.7,9i,10g-SQL Server 2000-Sybase 12.x-TERADATA V2 R5 -DB2 UDB 8.1.x,8.2 EE/EEE-IBM Informix 9.2Design Tools-ERwin 3.0 to 3.5.2,4.0 SP1 to 4.1-Oracle Designer 1.3.2,2.1.2,6.0,6i,9i-Sybase PowerDesigner PDM 6.1.x,7.5 to 9.5-IBM Rational E

14、R 98(I)to 2000,2000e to 2002-Microsoft VISIO Database(ERX)-Embarcadero ERStudio 5.1 to 6.6GA 9/2/05Win 2000,2003,XP15n元数据基础知识元数据基础知识nMMMM软件架构软件架构nMMMM软件特点软件特点n元数据应用案例元数据应用案例16Metadata Manager 特性特性17私有元数据目录私有元数据目录跨系统、跨系统、跨项目跨项目通用搜索通用搜索考究的考究的 knowledgebase角色角色,系统系统,基于流程的视图基于流程的视图18智能数据体系智能数据体系-提供了审计索引

15、的功能提供了审计索引的功能功能丰富的功能丰富的 可视化可视化图形化图形化回溯信息回溯信息直到数据源直到数据源精确的、最新的精确的、最新的元数据模型元数据模型驱动驱动当数据源当数据源改变时改变时关联信息关联信息被刷新被刷新19直观的分析和报表功能直观的分析和报表功能-近在咫尺的洞察力近在咫尺的洞察力“信息供应链信息供应链”的的全面质量管理全面质量管理数据质量数据质量,使用使用,冲突分析冲突分析,冗余分析冗余分析仪表盘驱动仪表盘驱动 监控和监控和信息公告信息公告20内嵌的数据整合引擎内嵌的数据整合引擎-访问到任何位置、任何元数据访问到任何位置、任何元数据 任何数据源任何数据源元数据元数据 知识库知

16、识库,平面文件平面文件,关系型数据库关系型数据库,应用程序应用程序,XML,CWM-XMI易于使用易于使用完全可视化的完全可视化的开发开发 环境用于环境用于元数据整合元数据整合?DBMSEAIMS OfficeERPCASEBIETLFlat FilesXMLOthersList List Automatic 4.List21可扩展的可扩展的Web-Based体系结构体系结构-灵活的开发和部署灵活的开发和部署百分之百基于百分之百基于WebJ2EE兼容平台兼容平台内嵌的私有化设置内嵌的私有化设置对象和功能层次的许可对象和功能层次的许可可扩展性可扩展性任何信息任何信息,任何关联任何关联,任何元数据

17、模型任何元数据模型(基于基于OMG MOF协议协议)友好的入口友好的入口Web服务服务,完全完全SDK没有隐藏的议程没有隐藏的议程 开放的关系型数据库开放的关系型数据库,操作系统操作系统,服务器支持服务器支持22集成集成Oracle,Erwin,PowerCenter等多种工具的元数据等多种工具的元数据PowerCenter 内内Cobol 结构的显示结构的显示23灵活的元数据抽取调度灵活的元数据抽取调度24业务元数据业务元数据 基本定义基本定义对象版本控制对象版本控制反应历史变化反应历史变化25元数据血缘分析元数据血缘分析 跨工具跨工具计算表达式计算表达式数据源数据源数据整合过程数据整合过程

18、26Metadata Manager 内置元数据同步引擎内置元数据同步引擎定期或不定期地更新数据项的具体内容定期或不定期地更新数据项的具体内容 可手工或调度执行元可手工或调度执行元数据同步任务数据同步任务27Metadata Manager:元数据模糊查询元数据模糊查询28Metadata Manager:集成了百张信息统计报表集成了百张信息统计报表29Metadata Manager登录登录30n元数据基础知识元数据基础知识nMMMM软件架构软件架构nMMMM软件特点软件特点n元数据应用案例元数据应用案例31Thrivent Financial 挑战挑战:跨数据仓库多个过程的影响分析多个应用

19、基础架构的管理所有手工的过程,Excel文件解决方案解决方案:环境:PowerCenter,PowerAnalyzer on AIX,ER StudioSuperGlue 元数据目录,搜索,血缘分析和影响分析收益收益:能够实现以前所不能作到的多种分析帮助决定数据仓库的成本及基础架构变更分析，可及时传播到各个团队32Hewlett-PackardData Insight挑战挑战:多个不同数据源中，存在不准确的、矛盾的数据不能跨系统的识别和找到相关内容解决方案解决方案:环境:PowerCenter,Oracle,SQL Server;Erwin,Rational Rose,Business Obj

20、ects,customSuperGlue 元数据目录,搜索,血缘分析 和影响分析收益收益:提高数据的准确性和一致性提高了针对数据起源、数据流程及数据目录的认识程度减少运营报告的周期提高已存在数据元素的可重用性和标准化程度33Waste Management自动元数据的采集自动元数据的采集挑战挑战:不能实现自动的源和目标数据源的元数据采集要为报表和信息系统提供准确、及时的元数据定义要提高ETL过程的可见度解决方案解决方案:环境:Oracle 9i,PowerCenter 7.x,IBM AIX,DB2 on AS400,Erwin,PowerAnalyzerSuperGlue 元数据目录,搜索,

21、血缘分析 和影响分析收益收益:高效的自动元数据采集为业务用户提供服务层次提高数据仓库中数据处理过程的可见度增强运营的技术元数据：转换、计算、运行时间、加载数据量等34Abbott Labs跨系统的影响分析跨系统的影响分析挑战挑战:手工管理元数据，主要方式:Excel,Access,Word不能实现跨系统的变化影响分析解决方案解决方案:环境:Oracle,SQL Server,Excel and Access,Erwin and Oracle Designer,CognosSuperGlue 元数据目录,搜索,血缘分析 和影响分析收益收益:广泛系统的影响分析提高决策力度精减业务流程方便业务人员完成商业和市场的分析35神州数码系统集成服务有限公司神州数码系统集成服务有限公司冷鹏冷鹏13501362259010-82705218谢谢谢谢