元数据管理与数据质量监控课件.ppt

《元数据管理与数据质量监控课件.ppt》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、元数据管理&数据质量监控北京瑞斯泰得数据技术开发有限公司项目背景功能概览五大类元数据管理型数据库业务操作型VSS文档ServerApplicationftptelnet……指标维度纬表字典基本表字典数据表数据库表视图物化视图存储过程字段……ETL报表数据接口接口文件元数据的类型元数据管理元数据管理-数据库元数据基本操作增、删、改、查加入到“个人文件夹”加入到“公共文件夹”表存在性实时查询字段备注查询字段备注保存表数据预览影响分析血统分析元数据管理-管理型元数据基本操作编辑、删除加入到“个人文件夹”加入到“

2、公共文件夹”工作桌面支持自动登录netterm自动登录plsql元数据管理-业务元数据增加步骤添加对象类别，例如：“统计周期”添加对象属性类别，例如：“字符型”添加对象属性，例如：“描述”新增一个具体的元数据，例如：“月”元数据管理-数据字典基本操作浏览增加编辑删除元数据管理-SQL脚本元数据基本操作编辑删除工作桌面支持用UltraEdit打开脚本文件和日志文件血统分析功能描述：通过对元数据关系的回溯，以图形方式展现指定元数据的数据血统和加工过程。作用：通过该功能，业务人员可以清楚的了解指标等关键数据的来

3、龙去脉。影响分析功能描述：通过分析元数据之间的关系，以图形方式直观展现指定实体对全局的影响，如某数据库表的变更将影响到哪些ETL、数据库表等。作用：通过影响分析，技术人员可掌握各程序、数据之间的关系和相互影响，更好确定系统变更所涉及的范围，避免遗漏和误操作，从而降低维护人员的工作量和出错的机率。数据质量六大评估标准哪些数据是以非标准格式存储的？哪些数据值提供了冲突信息？哪些数据不能正确描述对象的属性或已经过期？那些数据根本就不存在？关键数据是否及时传送到目标应用？哪些数据记录时重复的记录？数据质量监控数据

4、质量监控-质量点监控功能描述监控某个生产流程环节，查看该环节的质量指标是否符合要求。作用保证数据在生产过程的某个生产环节的正确性和一致性。规则维护定义SQL告警条件任务调度数据集维护规则维护标准探测模式探测分布探测日期探测任务调度数据质量监控-数据剖析探测出检查对象的数据模式，方便做数据分析，并能根据探出的数据模式自动生成数据规则表达式，产生数据校验规则。数据质量监控-数据指标数据集维护规则维护统计周期度量设定告警条件任务调度数据质量监控-表空间监控功能描述监控数据库表空间使用量是否超过指定的限额或百分比

5、。作用提前获得表空间不足的信息，以便及时处理，防止由于空间不足引起的异常发生。告警条件可用空间小于N兆使用率超过M%告警责任人任务调度表空间监控结果数据质量监控-表监控表选择任务调度数据质量监控-SQL脚本监控告警条件错误关键字、过滤关键字超时设置超时时长任务调度任务调度中心任务中心日志中心系统管理工作区版本控制元数据搜索分主题管理（公共文件夹）个人文件夹元数据导出元数据批量导入遵循CWM规范发现元数据源发生变化及时告警可以手工干预批量导入过程其它功能