大数据资源中心建设方案.docx

大数据资源中心建设方案V

第PAGE353页共NUMPAGES353页

大数据资源中心建设方案

目录

TOC\o1-6\u1资源中心建设方案 5

1.1中心总体定位设计 5

1.1.1总体设计 7

区域模型设计 8

1.1.2设计原则 8

1.1.3设计思路 9

1.1.4数仓设计 11

1.1.5数据安全 12

1.2建设XX区级数据湖 14

1.2.1数据湖数据架构 15

SRC近源数据层 16

ODS源数据层 17

1.2.2数据湖数据范围 18

1.3完成数据对接实施 18

1.4建设XX区基础库 19

1.4.1人口综合库建设 19

人口全息档案 21

人口全息视图 22

人口信息统计 23

人口信息查询 23

1.4.2法人综合库建设 24

法人数据整合 25

法人多维画像 27

法人统一视图 27

法人信息统计 28

1.4.3电子证照库建设 29

1.4.4空间地理库建设 29

1.5建设XX区主题库 30

1.5.1主题库建设概述 30

1.5.2主题库建设方法 31

建设思路 31

设计原则 32

构建方法 33

1.5.3一网通办主题库 35

建设目标 35

数据来源 36

数据规模 36

数据时效 36

数据归集方式 36

数据集成管理 37

应用服务 37

1.5.4一网统管主题库 40

建设目标 40

数据来源 41

数据规模 41

数据时效 41

数据归集方式 41

数据集成管理 42

应用服务 42

1.5.5城市规划主题库 42

建设目标 42

数据来源 43

数据规模 43

数据时效 43

数据归集方式 43

数据集成管理 44

应用服务 44

1.6建设XX区专题库 44

1.6.1应急专题库概述 44

1.6.2管理对象专题库 46

1.6.3灾害事件专题库 47

1.7三清单一目录梳理 48

1.7.1建设背景 48

1.7.2总体目标 48

1.7.3梳理思路 49

1.7.4梳理工作开展 52

1.7.5一目录三清单梳理培训 54

1.7.6一目录三清单梳理指导 58

1.7.7一目录三清单梳理交付内容 60

1.7.8梳理工作要求 60

资源中心建设方案

在本次项目中，我们需要制定XX区公共数据汇聚的标准规范和管理制度，归集全区各单位的政府公共数据，形成XX区的数据资源湖。同时经过对数据进行清洗、转换、融合、治理后，形成高质量的公共数据资源，构建形成XX区标准化数据仓库。

基于全区的数据资源湖，利用经过治理后的数据，可以针对某一特领域的业务数据共享、应用需求，按主题归集形成专题库和主题库，并面向政务部门及社会进行数据开放。此外，我们还将持续开展、深入XX区大数据的应用探索，围绕跨部门、跨领域、跨行业的数据应用需求，对数据实体进行数据关联、数据融合和衍生计算，生成算法标签，逐步建立不同领域的应用专题或主题库构建面向全区多部门提供统筹的数据共建共享共用的数据服务。

中心总体定位设计

区级大数据资源中心包括区级数据湖、基础库和融合数据库三大部分，是数据接入、数据归集和数据治理形成的结果。其中，数据治理保证区级数据湖中数据的规范，构建基础库和融合数据库，是更高层次的数据管理机制。通过数据治理，面向政务、物联、视频三大类数据，保障数据架构、数据标准、数据开发等数据管理职能的开展，提升数据管理水平，对数据采集、存储、交换、共享、使用等全生命周期进行持续改善。

本期项目建设的数据资源中心可覆盖XX区各委办局部门，数据来源包括区级政务数据、物联设备数据、视频数据等。可满足多源异构的结构化数据、半结构化数据和非结构化数据的存储，支撑政务数据共享交换需求，支撑XX区智慧城市建设上层应用算法模型训练需求，支撑上层应用系统的数据需求，需要设计相应的数据库以及数据存储结构。

区级大数据资源中心的建设采用区级数据湖+基础库+主题库的数据存储架构，区级数据湖与主题库依托于大数据支撑子系统建设。数据来源主要来自于XX区各级委办单位、各乡镇街道，数据包括区委办局政务数据、视频数据，事业单位数据等，经由数据数据交换子平台采集、归集后：

将数据存储落地于XX区数据湖，区级数据湖中存储贴源业务数据，并形成共享数据的数据资源门户；

由数据数据交换子平台将数据从区数据湖交换至数据治理工具；

数据治理工具根据数据治理规则、数据标准、行业指标等特性，完成对源业务系统贴源数据的治理，形成高质量的业务数据；

由数据数据交换子平台