没有合适的资源?快使用搜索试试~ 我知道了~
首页中国移动省级NG2-BASS(v5.0)技术规范数据质量管理子系统分册.docx
资源详情
资源评论
资源推荐

.
中 国 移 动 通 信 企 业 标 准
中 国 移 动 省 级 N G 2 - B A S S 技 术 规 范
数 据 质 量 管 理 子 系 统 分 册 ( v 5 . 0 )
T h e Te c h n i c a l S p e c i c a t i o n F a s c i c u l e
f o r D a t a Q u a l i t y M a n a g e m e n t S u b s y s t e m
o f N e w G e n e r a t i o n 2 B u s i n e s s A n a l y s i s
S u p p o r t S y s t e m
版 本 号 : 5 . 0 . 0
中国移动通信集团公司 发布
2 0 1 4 -X-X X 发 布
2 0 1 4 -X-X X 实 施
QB-Y-XXX-XXXX

QB-Y-XXX-2014
目 录
1. 范围.................................................................................................................1
2. 规范性引用文件.................................................................................................1
3. 术语、定义和缩略语...........................................................................................5
4. 总体说明...........................................................................................................8
4.1. 概述........................................................................................................8
4.2. 建设目标.................................................................................................9
4.3. 系统架构.................................................................................................9
4.3.1. 功能架构........................................................................................9
4.3.2. 技术架构......................................................................................13
5. 业务问题.........................................................................................................15
5.1. 数据质量问题域......................................................................................15
5.1.1. 信息问题域...................................................................................15
5.1.2. 技术问题域...................................................................................16
5.1.3. 流程问题域...................................................................................18
5.1.4. 管理问题域...................................................................................18
5.2. 应用专题...............................................................................................19
5.2.1. 开放式个人 KPI 监控......................................................................19
5.2.2. 数据质量满意度反馈......................................................................22
5.2.3. 新数据源质量稽核.........................................................................24
5.2.4. 关键维度一致性监控......................................................................26
5.2.5. 数据质量计分卡............................................................................28
5.2.6. 数据质量图形化运维......................................................................29
5.2.7. KPI 急报快报................................................................................33
5.2.8. 指标波动阈值预测.........................................................................39
5.2.9. 接口数据内容检查.........................................................................42
5.2.10. 中断式监控预警..........................................................................46
6. 数据质量获取层...............................................................................................48
6.1. 数据采集范围.........................................................................................48
6.1.1. 接口信息采集...............................................................................49
6.1.2. 基础编码采集...............................................................................49
6.1.3. 处理过程信息采集.........................................................................49
6.1.4. 指标信息采集...............................................................................50
6.1.5. Hadoop 结构化数据采集...............................................................50
6.2. 数据采集功能.........................................................................................50
7. 数据质量存储层...............................................................................................51
7.1. 数据质量存储内容..................................................................................51
7.1.1. 数据质量规则库............................................................................51
I

QB-Y-XXX-2014
7.1.2. 数据质量信息库............................................................................53
7.1.3. 数据质量知识库............................................................................54
7.2. 数据质量存储方式..................................................................................55
8. 数据质量功能层...............................................................................................55
8.1. 基础功能...............................................................................................56
8.1.1. 规则配置管理...............................................................................56
8.1.2. 数据质量监控...............................................................................64
8.1.3. 数据质量问题处理.........................................................................76
8.1.4. 数据质量评估...............................................................................80
8.1.5. 数据质量报告...............................................................................92
8.1.6. 数据质量对外服务.........................................................................97
8.1.7. 数据质量两级联动.........................................................................98
8.2. 开放式个人 KPI 监控.............................................................................114
8.2.1. 功能框架....................................................................................114
8.2.2. 处理流程....................................................................................116
8.2.3. 功能要求....................................................................................119
8.3. 数据质量满意度反馈.............................................................................123
8.3.1. 功能框架....................................................................................123
8.3.2. 处理流程....................................................................................124
8.3.3. 功能要求....................................................................................125
8.4. Hadoop 结构化数据稽核.......................................................................126
8.5. 新数据源质量稽核................................................................................127
8.5.1. 新数据源范围.............................................................................127
8.5.2. 功能框架....................................................................................128
8.5.3. 处理流程....................................................................................130
8.5.4. 功能要求....................................................................................131
8.6. 关键维度一致性监控.............................................................................134
8.6.1. 功能架构....................................................................................134
8.6.2. 处理流程....................................................................................135
8.6.3. 功能要求....................................................................................137
8.7. 数据质量计分卡....................................................................................138
8.7.1. 功能架构....................................................................................138
8.7.2. 处理流程....................................................................................140
8.7.3. 功能要求....................................................................................141
8.8. 数据质量图形化运维.............................................................................148
8.8.1. 数据质量图形化运维功能.............................................................149
8.8.2. 数据质量图形化运维流程.............................................................153
8.9. KPI 急报快报........................................................................................160
8.9.1. 业务流程....................................................................................160
II

QB-Y-XXX-2014
8.9.2. 功能架构....................................................................................161
8.9.3. 急报快报订阅.............................................................................162
8.9.4. 急报快报监控实现.......................................................................163
8.9.5. 急报快报信息发布.......................................................................165
8.9.6. 急报快报问题反馈.......................................................................165
8.10. 指标波动阈值挖掘分析........................................................................166
8.10.1. 挖掘分析功能...........................................................................166
8.10.2. 挖掘分析流程...........................................................................168
8.10.3. 挖掘分析模型...........................................................................169
8.10.4. 挖掘分析范围...........................................................................171
8.11. 接口数据内容检查..............................................................................173
8.11.1. 内容检查功能...........................................................................173
8.11.2. 内容检查流程...........................................................................176
8.11.3. 内容检查方法...........................................................................177
8.12. 中断式监控预警..................................................................................178
8.12.1. 业务流程..................................................................................178
8.12.2. 功能架构..................................................................................179
8.12.3. 监控告警..................................................................................180
8.12.4. 问题处理..................................................................................183
8.12.5. 中断监控接口方案.....................................................................183
8.12.6. 作业调度模块中断实现参考方案..................................................185
9. 数据质量应用层.............................................................................................186
9.1. 开放式个人 KPI 监控.............................................................................187
9.2. 数据质量满意度反馈.............................................................................187
9.3. Hadoop 结构化数据稽核.......................................................................187
9.4. 新数据源质量稽核................................................................................187
9.5. 关键维度一致性监控.............................................................................187
9.6. 数据质量计分卡....................................................................................188
9.7. 数据质量图形化运维.............................................................................188
9.8. 数据质量两级联动管理..........................................................................188
9.9. KPI 急报快报........................................................................................188
9.10. 指标波动阈值预测..............................................................................189
9.11. 接口数据内容检查..............................................................................189
9.12. 中断式监控预警..................................................................................190
9.13. BOSS 接口数据稽核...........................................................................190
9.14. 客户信息主题评估..............................................................................190
III

QB-Y-XXX-2014
9.15. 数据质量知识.....................................................................................191
10. 数据质量运行维护管理.................................................................................192
10.1. 数据质量管理机制..............................................................................192
10.1.1. 组织机构与职责........................................................................192
10.1.2. 角色与职责..............................................................................192
10.2. 数据质量管理流程..............................................................................193
10.2.1. 经营分析系统需求变更控制流程..................................................193
10.2.2. 数据质量告警处理流程...............................................................195
10.2.3. 数据质量问题处理流程...............................................................196
10.2.4. 数据质量报告管理流程...............................................................198
10.3. 管理范围...........................................................................................199
10.4. 定期报告...........................................................................................199
10.4.1. 系统数据质量监控点报告...........................................................199
10.4.2. 数据质量问题处理率报告...........................................................200
11. 系统技术要求..............................................................................................200
11.1. 数据采集技术要求..............................................................................200
11.2. 数据存储要求.....................................................................................200
11.3. 功能组件与对外交互要求.....................................................................200
11.4. 监控检查技术要求..............................................................................201
11.5. 控制台和对外服务接口技术要求...........................................................201
11.6. 数据质量监控其它实施要求..................................................................201
12. 编制历史....................................................................................................202
附录 A:中国移动省公司运营机构代码..................................................................210
IV
剩余63页未读,继续阅读
















安全验证
文档复制为VIP权益,开通VIP直接复制

评论0