文档介绍：***省级NG2- --元数据管理分册 12 十一月 2017
目录
2 元数据管理体系架构
1 本期规范修订目的
3 本期规范新增与主要修订内容
4 附件说明
修订背景
实现两级经分元数据信息互通,保障一、二经指标口径一致,使各省上报重点一经接口的真实汇总过程透明化,在发生数据质量问题时两级系统有共同的沟通平台,并防范部分省公司干扰指标真实性。
修订背景
经过NG1-,各省在元数据管理和应用方面积累了一些具有推广价值的经验,同时也发现了一些存在问题
一级经营分析系统数据质量依赖于省级经营分析系统上传的接口数据质量,需要加强两级经营分析系统的数据理解一致性和重点接口的数据处理过程规范性;
为提升经分系统数据质量,需要建立经分与数据源系统的协同管理机制;
经营分析系统的发展对提出元数据管理模块提出新的要求,需要增强元模型管理、元数据获取能力和对外服务能基础能力,以更好支持经分建设和应用。
修订目标和思路
修订目标
建立经营分析系统核心元模型,规范数据处理过程的结构化描述
实现两级经营分析系统元数据互通,促进重点接口数据处理过程规范化
为经营分析系统基础技术模块提供支撑,扩充元数据服务接口
服务经营分析系统数据质量管理子系统,为源系统联动机制提供基础支撑
修订思路
以CWM为基础面向经营分析系统建设和管理需要进行元模型细化和扩展,针对关键元数据对象建立核心元模型,实现两级元数据互通
增强SQL脚本解析,提升数据处理逻辑过程的展现能力
建立维表库管理、接口管理机制,支撑数据质量的源系统协同机制
提供数据封装和数据地图访问服务接口,增强元数据对外服务能力
目录
3 本期规范新增与主要修订内容
4 附件说明
2 元数据管理体系架构
1 本期规范修订目的
元数据管理模块在经营分析系统中的定位
本期修订内容
本期修改内容
本期新增内容
经营分析系统核心元模型
两级经分元数据互通
维表库管理
接口管理
数据地图展现
数据封装元数据
客户隐私信息元数据
元数据变更管理
数据源接口元数据
维度数据
辅助安全管理
元数据服务接口(二期)
SQL脚本自动解析(二期)
二期建设内容
目录
2 元数据管理体系架构
4 附件说明
1 本期规范修订目的
3 本期规范新增与主要修订内容
元数据获取层
元数据获取新增SQL解析二期内容建设
在原有SQL脚本自动解析一期建设基础上,规范数据处理元数据的结构化描述、细化描述粒度、丰富解析效果展现层次,对SQL解析中的关键问题提出处理方法要求:
数据处理过程元数据的生成
SQL脚本对象结构化描述
以ClassifierMap对象描述SQL脚本的数据转换处理逻辑
以RelationalOperator对象描述SELECT子句的关系代数操作
以FeatureMap对象细化描述SQL脚本的关系操作
数据处理过程日志规范要求
SQL脚本的上下文关系处理要求
多路径问题和信息丢失问题处理要求
二期建设:SQL脚本解析
日志规范要求细化
运行日志的输出形式:
日志文件
日志表
日志内容中要求包含:
提交到数据库执行的SQL脚本
创建数据库链接的相关参数
文件导入导出操作
不要求包含游标操作信息