基于CWM的数据仓库体系结构设计.ppt

《基于CWM的数据仓库体系结构设计.ppt》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、基于CWM的数据仓库体系结构设计我的工作提出了一个基于CWM的数据仓库体系结构基于该体系结构，参与设计和实现了一个电信综合业务信息服务平台提纲背景介绍数据仓库、元数据理论介绍CWM、MOF、UML、XMI规范介绍基于CWM的数据仓库体系结构设计电信综合业务信息服务平台设计背景介绍数据仓库的应用越来越广泛不同数据仓库工具之间无法进行数据交换企业的应用受到工具的限制利用元数据可以实现数据交换提纲背景介绍数据仓库、元数据理论介绍CWM、MOF、UML、XMI规范介绍基于CWM的数据仓库体系结构设计电信综合业

2、务信息服务平台设计数据仓库理论数据仓库的定义数据仓库的建设数据仓库的应用国内数据仓库建设的问题元数据定义描述数据的数据研究元数据的原因管理、使用数据的需求系统分布和互通的要求元数据重用、共享的要求元数据的建模和标准化建模的两大方向元数据参考模型元数据模型标准化OMGMDC提纲背景介绍数据仓库、元数据理论介绍CWM、MOF、UML、XMI规范介绍基于CWM的数据仓库体系结构设计电信综合业务信息服务平台设计元数据的层次Student（“张东”，“男”，…）Student（“李芳”，“女”，…）……Recor

3、d（“Student”，Field（“name”，String），(Field（“sex”，String）…)MetaClass（“Record”，[MetaAttr(（“name”）,String),MetaAttr((“fields”),list)]MetaClass（“Field”，…）通用的元元模型信息，数据（M0）模型（M1）元模型（M2）元元模型（M3）OMG规范和元数据层次的关系元数据层次MOF术语示例M3元元模型MOF模型M2元模型，元元数据UML元模型，CWM元模型M1模

4、型，元数据UML模型，CWM模型M0对象，数据数据仓库数据CWM和相关规范的关系CWM和MOF的关系CWM和UML的关系直接继承了UML核心元模型使用UML图形标记使用UML中的OCL（对象约束语言）CWM和XMI的关系CWM的组成CWM元模型基础包资源包分析包管理包CWMDTD和CWMXMLCWMIDL提纲背景介绍数据仓库、元数据理论介绍CWM、MOF、UML、XMI规范介绍基于CWM的数据仓库体系结构设计电信综合业务信息服务平台设计基于CWM的数据仓库体系结构数据源OLTP数据库遗留数据内部办公系统

5、数据外部数据数据源多种类型：关系型、多维、记录、XML以及其它一些工具类型关系型：模式，物理表，视图，字段，索引，触发器，外关键字，主关键字，数据类型，字段值，数据记录，记录的集合Relational元模型Relational元模型（续1）Relational元模型（续2）关系型数据源的主要接口BaseTable：查询和修改表的属性、触发器和结构Catalog：查询和修改包含的元素Column：查询和设置属性Row：查询和修改一条记录的内容RowSet：查询和修改包含的记录ETL读取数据清洁数据转换数据

6、装载数据ETL组件的接口黑盒变换：Transformation，DataObjectSet，TransformationUse白盒变换：FeatureMap，ClassifierMap，ClassifierFeatureMap，TransformationMap变换的执行顺序控制：TransformationTask，TransformationStep，TransformationActivity，StepPrecedence，PrecedenceConstraint中央数据仓库数据粒度最细且多层次数

7、据是历史的数据是时间相关的大数据量数据是整合的通用的、全局的操作数据存储ODS操作型系统ODS1/21/2企业数据仓库数据集市企业数据仓库最细粒度数据集市部门2粒度2数据集市部门1粒度1部门3粒度3外部数据源数据集市数据集市的特点面向部门应用规模小，投资少使用方便且成本低元数据库类型：中央元数据库本地元数据库内容：抽取过程：任务、执行顺序、映射关系、转换规则描述数据：方位图、数据之间的商业关系、商业规则、数据的改变数据仓库管理：安全性、运行状态、抽取过程的调度、I/O对象及其关系数据仓库管理访问控制和安

8、全性管理数据增长管理抽取过程的管理性能管理故障恢复扩充和演变管理数据仓库管理接口抽取过程的调度（WarehouseProcess，WarehouseEvent，InternalEvent，ScheduleEvent，ExternalEvent）抽取过程的执行（TransformationExecution，StepExecution，ActivityExecution）数据元素的变化（Measurement，ChangeRequest）OL