03数据治理实施文档.docx

数据治理实施

--高涛

数据治理平台概念介绍

概念、平台介绍

平台包含标准平台（LY_IS）,主数据平台（LY_MDP）,质量平台（LY_QMP），元数据平台（YX_YJS）,数据资产服务（LY_GS），过程管理（LY_YSJ）

旧版数据中心LY_SDC

数据中心项目实施（主讲）

2.1平台组成

旧版数据中心：

（1）LY_SDC，所有的标准表创建在LY_SDC下。和平台库共用一个表空间

标准平台（LY_IS,LY_ISYWK）,主数据（LY_MDP,LY_HIS,LY_DWH）两个平台

注意：

标准和主数据必须一起发版使用

质量平台有些项目地看现场需求发版使用

2.2实施策略

1、由于项目在标准平台已经内置国标标准，并且已经发版、引用、统一建表到LY_ISYWK下，所有常规数据可以查看导出的excel文档直接进行分析数据交换，如果找不到表则新增，然后进行新增标准

图SEQ图\*ARABIC1已经引用的表

图SEQ图\*ARABIC2已经同步的表

图SEQ图\*ARABIC3同步LY_ISYWK的表图SEQ图\*ARABIC4同步到LY_ISYWK的字典

2、数据下行统一从LY_ISYWK进行下行数据交换即可

数据治理项目实施

3.1平台组成

标准平台（LY_IS,若干全局库），主数据（LY_MDP,LY_HIS,LY_DWH），质量（LY_QMP）是必须的。

元数据平台（YX_YJS）,数据资产服务（LY_GS）是按项目地时间情况部署,过程管理（LY_YSJ）是2019年10月之后新项目地必须部署的。

3.2实施策略

1.表是全量集成，使用业务域分类的标准，内置表1300多张，需要大量的新增表和整理表

2.标准全局库系统、odi项目文件夹系统、过程系统名称要统一

工作职责

注：红色字体是数据治理项目才需要有的工作

工作内容

研发一部

数据售后

实施

老师

标书内容响应

技术支持

部署安装

培训

技术支持（docker）

安装

分析业务库

（1）原表筛选

平台支持

确定集成数据

（过程平台、

下线分析）

和老师确定集成数据清单

过滤审核

形成现状报告

（1）

平台支持

（过程平台）

梳理业务域标准

管理属性维护

确源、确权

确定共享数据

意见收集

维护标准稳定版本

根据数据验证

反馈文档给实施

收集老师意见变成文档

咨询

确源、审核

入库标准

录入标准

数据集成

数据清洗

数据上行和下行维护

出交换注意事项

做数据交换

主数据

数据显示

历史库备份

接口发布

培训

联调

质量平台

流程同步

质量报告梳理

培训

联调并整理报告

元数据平台

数据采集

数据地图配置

培训

配置数据地图

资产服务平台

数据同步

属性补充

培训

初始化数据

Bug处理

修复

反馈需求

功能优化

新需求二次开发

优化和开发

反馈需求

验收文档

补全

根据项目地响应

提供明确要求

总的实施策略

整理标准固化标准和odi寻找映射关系是对立关系，若是觉得新增一个和业务库一直的标准表，则数据库交换过程是表对拷的过程，若是标准确定则需要数据交换寻找和标准对应的字段映射关系信息。所以不可能出现二者都讨巧的办法。

在未来标准文档后，一般只会做映射，少量做新增，这个是趋势。

注意细节：

首先要熟悉标准维护的表机构内容，做数据交换的人应该至少要通读3遍。

要做标准维护的人，应该要熟悉每个表的内涵和存储对应的业务逻辑内容。

按道理现有数据治理的标准应该包好共享数据中心的内容，后续可以自己融合在出一版标准。做到表名称不变，兼容以前的数据中心（LY_SDC）。

理想情况：LY_SDC==LY_ISYWK=数据治理的标准

安装部署

公共环境配置

数据库连接数修改

SHOWPARAMETEROPEN_LINKS;

ALTERSYSTEMSETOPEN_LINKS=50SCOPE=SPFILE;

ALTERSYSTEMSETOPEN_LINKS_PER_INSTANCE=50SCOPE=SPFILE;

注：依据有多少个业务库，则需要设置多少个DBLINK数。改完需重启数据库服务才能生效！经过优化存储过程，目前这个参数可以不修改！（在sys下命令行执行）

关闭防火墙

关闭防火墙，或者开放docker容器映射的一些端口。

关闭防火墙：systemctlstopfirewalld

开机禁用：systemctldisablefirewalld

数据治理产品产品名称和对应英文缩写

产品名称

英文缩写（数据库用户，镜像）

服务名称

占用端口

访问地址