大数据资源平台设计方案市大数据中心.pdf

大数据资源平台设计方案

-市大数据管理中心-

目录

1背景与需求分析

2总体架构设计

3平台功能设计

4平台数据综合应用

5项目实施方案

大数据管理中心发展背景

为建设卓越全球城市，实现政府治理能力现代化目标，由

市大数据中心牵头，政务公共数据管理和互联网政务服务

方面采取了一系列的实践工作。根据《市公共数据和一网通

办管理办法》要求，前期已“一网通办”的政务服务领域

进行了信息化项目建设，提升了政府治理能力和公共服务

水平的同时，也产生了汇聚全市政务公共数据，探索政务服

务领域应用的需求。

市大数据中心作为全市政务数据的主要管理单位，承担着

政策本地化落实、政务数据交换、大数据应用研究、信息化

建设运维以及其他数据相关的工作职责，从中心成立之初便

开始研究政务数据管理和应用的方法，去年年底探索了以政

务数据交换共享为核心的实践，但随着对中心职能的理解加

深，我们认为中心不仅作为全市政务数据的“枢纽中转中心

”，更应该成为各政务服务条线领域的“归集管理中心”，

为本市的经济活动、公共事业、社会关系、人员密度等各城

市管理领域提供数据层面的最大支撑。

规划公共数据发展路线支撑城市服务能效提升

整体共享协同数据科学管理城市高效运行精准城市服务

ü公共数据共享ü数据完整归集ü应急事件响应ü社会治理

ü社会数据协同ü数据实时同步ü事件风险预防ü宏观经济

ü条线业务协同ü资源目录健全ü市场监管

ü数据服务开放ü数据全面治理ü生态保护

大数据共享交换平台建设与使用情况

大数据中心自去年开始，根据整体规划启动了市数据共享交换

平台项目的建设，并于2019年1月开始正式进行全市范围的试运行。

平台建设内容包括：

1、总集成及部分应用开发：平台集成门户及整体平台的基础功

能菜单级整合；

2、数据治理子系统：包含数据交换模块和服务管理模块，实现

数据资源目录及三清单的管理，并提供市级数据库的对外发布利用；

3、数据共享交换子系统：实现数据交换引擎、统一调度引擎、

任务管理、数据桥接等功能，以及数据湖数据的存储管理、共享与

交换；

4、数据质量监管及支撑子系统：实现数据质量管理功能，包括

数据质量规则制定、数据质量稽核、数据质量问题闭环管理；

5、大数据支撑管理子系统：包含市级数据湖和市级数据库，汇

聚“四大基础库”、“市级统建系统”、“各市级委办系统”、“平台接入52个委办的公共数据，每月16亿条以上，数

各行政区系统”的经过初始治理的原始数据；并存放经过一系列清据总容量176.0TB，人口库预计46.75TB，法人库预计

洗、转换、加载、治理步骤后的高质量的政务数据资源，为城市管1.78TB，空间地理库预计7.99TB，电子证