大数据平台数据治理整体解决方案 大数据分析平台数据治理建设方案 下载本文

内容发布更新时间 : 2024/5/20 6:42:39星期一 下面是文章的全部内容请认真阅读。

大数据分析平台数据治理建设方案

4.1.1 4.1.2 4.1.3 4.2

概述..................................................................................................................... 103 标准体系编制原则 ............................................................................................. 104 数据标准编制流程 ............................................................................................. 105

标准体系 ...................................................................................................................... 111

4.2.1 4.2.2 4.2.3 4.2.4 4.2.5 4.2.6 4.2.7 第5章 5.1 5.2 5.3 5.4

数据编码标准 ..................................................................................................... 111 数据交换标准 ..................................................................................................... 113 数据管控标准 ..................................................................................................... 116 数据安全标准 ..................................................................................................... 117 数据质量规范 ..................................................................................................... 122 数据模型规范 ..................................................................................................... 125 数据共享与开放管理办法 ................................................................................. 135

城市数据采集平台 ............................................................................................. 136

建设目标 ...................................................................................................................... 136 建设原则 ...................................................................................................................... 137 建设定位 ...................................................................................................................... 138 建设内容 ...................................................................................................................... 138

5.4.1 5.4.2

系统总体架构 ..................................................................................................... 138 技术框架 ............................................................................................................. 139

智能终端层 ............................................................................................................... 139 后台服务层 ............................................................................................................... 140 数据管理以及整合层 ............................................................................................... 140

5.4.2.1 5.4.2.2 5.4.2.3

5.4.3 5.4.4

信息采集构成 ..................................................................................................... 141 系统功能架构 ..................................................................................................... 142

用户界面 ................................................................................................................... 142 登录 ..................................................................................................................... 142 首页动态任务...................................................................................................... 143

5.4.4.1

5.4.4.1.1 5.4.4.1.2

5.4.4.1.3 4.3.1.3 采集任务详情 ........................................................................................ 143 5.4.4.1.4 5.4.4.1.5

采集任务表单...................................................................................................... 144 离线保存 ............................................................................................................. 145

v

大数据分析平台数据治理建设方案

5.4.4.1.6 5.4.4.1.7

核对补全、纠错 .................................................................................................. 145 任务列表 ............................................................................................................. 146

5.4.4.1.8 4.3.1.8 待提交的任务 ........................................................................................ 147 5.4.4.1.9 5.4.4.1.10 5.4.4.1.11 5.4.4.2

已提交的任务...................................................................................................... 148 消息 ................................................................................................................... 149 我的 ................................................................................................................... 150

后台管理界面 ........................................................................................................... 152 登录 ..................................................................................................................... 152 任务管理 ............................................................................................................. 152 用户管理 ............................................................................................................. 156 消息推送 ............................................................................................................. 156

5.4.4.2.1 5.4.4.2.2 5.4.4.2.3 5.4.4.2.4

第6章 6.1

数据共享交换平台 ............................................................................................. 156 总体设计 ...................................................................................................................... 156

6.1.1 6.1.2 6.1.3 6.1.4 6.1.5 6.1.6 6.1.7 6.2

系统总体架构图 ................................................................................................. 157 系统拓扑 ............................................................................................................. 159 资源交换与目录管理模型设计 ......................................................................... 160 交换系统总体架构设计 ..................................................................................... 163 目录系统总体架构设计 ..................................................................................... 167 平台监督及运行管理设计 ................................................................................. 170 内外网交换设计 ................................................................................................. 172

子系统设计方案 .......................................................................................................... 174

6.2.1 信息资源交换系统设计 ..................................................................................... 175

政务信息资源交换管理平台的建设原则................................................................ 175 交换平台总体架构设计 ........................................................................................... 176 总体架构设计...................................................................................................... 176 政务信息资源交换平台功能 .............................................................................. 178 多交换域设计...................................................................................................... 179 前置机的部署结构 .............................................................................................. 181 交换域权限管理 .................................................................................................. 181

vi

6.2.1.1 6.2.1.2

6.2.1.2.1 6.2.1.2.2 6.2.1.2.3 6.2.1.2.4 6.2.1.2.5

大数据分析平台数据治理建设方案

6.2.1.3 交换桥接子系统 ....................................................................................................... 182 概述 ..................................................................................................................... 182 交换桥接子系统方案设计 .................................................................................. 183 消息的业务流程处理 .......................................................................................... 187 不同业务消息的映射和转换 .............................................................................. 188 系统监控与管理 .................................................................................................. 188

6.2.1.3.1 6.2.1.3.2 6.2.1.3.3 6.2.1.3.4 6.2.1.3.5 6.2.1.4

前置交换子系统 ....................................................................................................... 189 概述 ..................................................................................................................... 189 交换前置子系统方案设计 .................................................................................. 190 消息的业务流程处理 .......................................................................................... 192 不同业务消息的映射和转换 .............................................................................. 193 系统监控与管理 .................................................................................................. 194

6.2.1.4.1 6.2.1.4.2 6.2.1.4.3 6.2.1.4.4 6.2.1.4.5 6.2.1.5

交换传输子系统 ....................................................................................................... 194 概述 ..................................................................................................................... 194 交换传输子系统方案设计 .................................................................................. 197 消息传送应支持HTTP和HTTPS协议 ............................................................... 198 提供消息寻址功能 .............................................................................................. 198 消息传送策略处理 .............................................................................................. 198 传输异常处理...................................................................................................... 199 信息转换功能...................................................................................................... 199 系统监控与管理 .................................................................................................. 199

6.2.1.5.1 6.2.1.5.2 6.2.1.5.3 6.2.1.5.4 6.2.1.5.5 6.2.1.5.6 6.2.1.5.7 6.2.1.5.8 6.2.1.6

交换管理子系统 ....................................................................................................... 200 概述 ..................................................................................................................... 200 交换管理子系统功能 .......................................................................................... 201 交换平台强审计功能 .......................................................................................... 201 前置交换子系统注册管理功能 .......................................................................... 202 前置交换子系统状态查询功能 .......................................................................... 202 前置交换子系统信息更新及删除功能 .............................................................. 202 交换流程远程部署功能 ...................................................................................... 203 交换服务远程部署与管理功能 .......................................................................... 203

vii

6.2.1.6.1 6.2.1.6.2 6.2.1.6.3 6.2.1.6.4 6.2.1.6.5 6.2.1.6.6 6.2.1.6.7 6.2.1.6.8

大数据分析平台数据治理建设方案

6.2.1.7 信息交换日志管理及日志查询功能 ....................................................................... 203

6.2.2 信息资源目录系统设计 ..................................................................................... 203

系统概述 ................................................................................................................... 204 资源目录典型流程 ................................................................................................... 205 目录系统功能设计 ................................................................................................... 210 目录体系必须遵守的各项标准 ............................................................................... 215

6.2.2.1 6.2.2.2 6.2.2.3 6.2.2.4

6.2.3 监督及运行管理平台设计 ................................................................................. 218

概述 ........................................................................................................................... 218 监控管理系统架构设计 ........................................................................................... 219

6.2.3.1 6.2.3.2

6.2.4 内外网交换中心数据交换设计 ......................................................................... 222

概述 ........................................................................................................................... 222 数据交换机制 ........................................................................................................... 229 内外网数据交换平台的特点 ................................................................................... 230

6.2.4.1 6.2.4.2 6.2.4.3

6.2.5 应用系统支撑设计 ............................................................................................. 232

共享信息查询 ........................................................................................................... 232 应用系统接口调用 ................................................................................................... 233 业务协同 ................................................................................................................... 234 系统平台监控 ........................................................................................................... 236

6.2.5.1 6.2.5.2 6.2.5.3 6.2.5.4

6.3 政务信息资源共享交换管理办法 .............................................................................. 237

6.3.1 6.3.2 6.3.3 6.3.4 6.3.5 6.3.6 第7章 7.1 7.2

总则..................................................................................................................... 237 目录编制 ............................................................................................................. 239 共享申请 ............................................................................................................. 239 信息交换 ............................................................................................................. 241 共享信息使用和安全 ......................................................................................... 242 监督评估 ............................................................................................................. 244

数据融合清洗 .................................................................................................... 245

概述 .............................................................................................................................. 245 数据融合清洗工具 ...................................................................................................... 246

7.2.1 工作流调度工具(Jupiter) .............................................................................. 246

viii

大数据分析平台数据治理建设方案

7.2.1.1 界面及项目管理 ....................................................................................................... 246 起始页 ................................................................................................................. 246 界面简介 ............................................................................................................. 248

菜单栏 .................................................................................................... 249 工具栏 .................................................................................................... 249 项目/服务导航栏 ................................................................................... 250 监控导航栏 ............................................................................................ 250 工作流设计面板 ..................................................................................... 250 事件/任务组建面板 ............................................................................... 250 项目/文件夹/工作流属性显示区 ......................................................... 250 用户日志输出显示区 ............................................................................. 250

7.2.1.1.1 7.2.1.1.2

7.2.1.1.2.1 7.2.1.1.2.2 7.2.1.1.2.3 7.2.1.1.2.4 7.2.1.1.2.5 7.2.1.1.2.6 7.2.1.1.2.7 7.2.1.1.2.8 7.2.1.1.3

项目/文件夹管理 ................................................................................................ 250

创建项目/文件夹 ................................................................................... 250 删除项目/文件夹 ................................................................................... 252 新项目/文件夹....................................................................................... 252 重命名项目/文件夹 ............................................................................... 253 项目/文件夹属性 ................................................................................... 253 导出项目 ................................................................................................ 254 导入项目 ................................................................................................ 255

7.2.1.1.3.1 7.2.1.1.3.2 7.2.1.1.3.3 7.2.1.1.3.4 7.2.1.1.3.5 7.2.1.1.3.6 7.2.1.1.3.7 7.2.1.1.4

工作流管理 ......................................................................................................... 256

创建工作流 ............................................................................................ 256 打开工作流 ............................................................................................ 257 删除工作流 ............................................................................................ 258 动工作流 ................................................................................................ 258 工作流锁定/解锁 ................................................................................... 259 工作流复制/粘贴 ................................................................................... 260 发布工作流 ............................................................................................ 261 命名工作流 ............................................................................................ 261 工作流属性 ............................................................................................ 262

7.2.1.1.4.1 7.2.1.1.4.2 7.2.1.1.4.3 7.2.1.1.4.4 7.2.1.1.4.5 7.2.1.1.4.6 7.2.1.1.4.7 7.2.1.1.4.8 7.2.1.1.4.9 7.2.1.1.5

服务管理 ............................................................................................................. 265

ix