数据治理中的数据质量和元数据管理重要性.pptxVIP

数据治理中的数据质量和元数据管理 重要性 刘春霞 资深工程师 议程 • 数据治理中的数据质量和元数据 数据质量重要性 元数据管理重要性 IBM 解决方案（Information Server） • 数据质量和元数据管理 –工具 业务术语表（Business Glossary） 洞察数据（Information Analyzer） 规范开发 （Fasttrack） 清洗/转换数据（QualityStage/DataStage） 元数据工作台 （Metadata Workbench) 议程 • 数据治理中的数据质量和元数据 数据质量重要性 元数据管理重要性 IBM 解决方案（Information Server） • 数据质量和元数据管理 –工具 业务术语表（Business Glossary） 洞察数据（Information Analyzer） 规范开发 （Fasttrack） 清洗/转换数据（QualityStage/DataStage） 元数据工作台 （Metadata Workbench) 60%+of CEOs say they need to do a better job leveraging information 70%of people’s time can be spent finding relevant information Integrated Information Platform 日新月异信息架构 相互没有关联的 信息孤岛 动态提供整合的信息 People, Processes, Applications 瓤捅个茄整 ! 关键ID缺少，或者 明显位数不符； ! 部分辅助信息的代 码不规范很多是文本 描述； 瓤捅个一颈 !相关联业务系统 数据不同步； !不同系统之间描 述同一业务问题 的数据定义存在 瓤捅遵辑销误 ! 违反业务规则 ! 违反业务代码定义 差异。 瓤捅厦重衣现 数据治理中遇到的问题 瓤捅耳余 !重复数据记录 !非法键值 ! 历史数据保留期限 不一致。 数据治理中遇到的问题 “是否存在数据 风险? 我能否审 计信息来源? ” 数据分析人员 数据架构师 项目执行者 业务分析人员 主题专家 数据管家 危害 83% 数据集成项目 需要重复实施甚至失败 错误或不完整数据导致 BI和CRM系统 不能正常 发挥优势甚至失效 25% 时间浪费在 —● 辨别数据是否“坏数据 ” 无效和重复性工 消费者缺乏信心 痛失商机 L 低劣数据质量严重地降低 公司年收入 无法预测商机而造成损失，比事后 弥补将多达 10~100 倍 作增加运作成本 ! 更好地理解信息 ! 易于查询 业务需求 ! 可信赖信息 元数据需求 端到端数据连线 瓤捅沧理嚴求 高效与完善的数据质量实施和管理体系 .Foundation to any success business projects .Source System analysis .Auditable Data Quality .Set up Data source view by federation .Auto generate verify SP with MDR .Verify result will be store with MDR .DC rules will be stored in MDR .DC rules will be implement in ETL .DC result will be record 归档业务术语 连接到 数据源 标准化、合并和纠正信息 组合和重构信息以用于 新的用途 分析 理解 源数据 Metadata Server / Metadata Workbench 跨信息整合生命周期的统一的元数据管理 异构信息的虚拟化访问 数据分析师 业务用户 主题专家 开发人员 架构师 DBAs 基于Information Server的数据管治架构图 Information Analyzer 井帚 Business Glossary 井帚 FastTrack 井帚 分析并建立 源数据轮廓 输入行业数据模型 Rational Data Architect 共同的企业词典 转换和清洗 诽厲 凉布 基于Information Server的元数据管理架构图 加强协作，让IT向业务看齐 Subject Matter Experts Data Analysts Business Users Developers Architects DBAs IBM 元数据管理目标 . 集合各个产品元数据管理到一个单一的，共享的元数据