149-数据质量提升方案.pdf

YYYYY数据治理平台一期项目

数据质量提升方案

目录

第一章数据质量与管理现状1

1.1数据问题现状概述1

第二章数据质量提升方案2

2.1梳理数据资产2

2.2建立数据标准5

2.2.1业务方面6

2.2.2技术方面7

2.2.3管理方面7

2.3分析数据质量8

2.4改善数据质量11

第三章数据管理提升方案12

3.1数据管理体系12

3.2数据管理组织12

3.3构建yyyyy数据管理制度框架13

3.3.1设计原则13

3.3.2设计方法14

3.3.3数据管理制度框架结构及说明14

第一章数据质量与管理现状

在yyyyy数据治理一期项目中，项目组对yyyyy汽车有限公司的报表平台和

四个业务系统BOM/DMS/MES（常州/青岛/镇江/黄骅）/WMS（常州/青岛/镇江/黄

骅）的数据质量进行了调研，调研结果总结如下，具体内容见《数据质量管理现状

分析报告》。

1.1数据问题现状概述

从调研情况的反馈看来，目前关于数据质量的问题并不多，最主要的问题集

中报表平台上，对于展示的结果存在一些问题，这其中部分问题是由于数据质量引

起的。例如：在业务系统生成的数据中，由于业务人员处理中未严格按照管理要求

和工艺流程录入原始数据等原因，导致业务系统中的数据存在相互矛盾，不能准确

地反映生产运营状况的现象。当这些数据被传送汇总到报表平台后，由于没有严格

检查，导致报表平台展示的数据与真实生产运营存在偏差。

另一部分是人工填报或载入的数据，虽然事先已经经过人工检核，应该不会

有大的错误。但是由于没有在系统上经过长时间的联调，不能保证系统重视运行

后，完全没有错误。

同时，目前没有数据质量管理平台对数据做监控，这会直接导致数据安全上

存在风险，并且也无法做到对数据的实时更新与维护。

目前企业没有数据仓库（EDW），对数据的管理和应用上会直接对接业务系

统，做数据质量提升时，会带来数据安全上的风险。

目前系统里存在大量的手工报表，这就意味着存在数据错误的风险，虽然会

有人工校验的参与，控制这些数据质量问题，让其通常不会有太多问题，但也导致

了问题的无规律性。

Page1

第二章数据质量提升方案

根据第一章的调研结果，yyyyy公司的报表平台与各个业务系统在数据质量

方面目前仍然存在部分问题。如业务系统中的数据存在相互矛盾，不能准确地反映

生产运营状况的现象。当这些数据被传送汇总到报表平台后，由于没有严格检查，

导致报表平台展示的数据与真实生产运营存在偏差。又如系统里存在大量的手工报

表，这就意味着存在数据错误的风险。

鉴于上述情况，我们建议yyyyy公司通过以下步骤发现并提升现有系统的数

据质量。

2.1梳理数据资产

随着大数据时代的来临，对数据的重视提到了前所未有的高度，“数据即资

产”的概念已经被广泛认可。数据就像企业的根基，是各企业尚待发掘的财富。数

Page2

据资产管理所起到的作用就是把在企业内外部的各种业务系统平台上获得的数据资

产有效的管理起来，并且围绕它支持创造业务价值目标，更好的流动、加工、分

析、应用，甚至是数据的开放、连接、整合、嫁接等一系列过程。围绕数据资产本

身建立起一个可靠可信的管理机制。能够通过数据资产管理清晰地知道相关数据的

定义、数据之间的血缘关系，并可以验证数据的有效性、合理性等数据质量指标。

从空间视角上看，因为数据在不同业务、不同系统中流动，因此梳理数据资产

必须实现跨系统、跨业务，端到端的模式。

从时间视角上看，企业管理数据资产，就是管理数据的生命周期。数据首先

被创建或获得，然后存储、维护和使用，最终被销毁。因而有效的数据管理，开始

于数据获取之前，企业先期制定数据规划、定义数据规范，以期获得实现数据采集、

交付、存储和控制所需的技术能力。