大数据平台数据治理整体解决方案-大数据可视化平台建设方案.pdf

大数据平台数据治理整体解决方案

大数据可视化平台建设方案

一、项目背景

“十三五”期间，随着我国现代信息技术的蓬勃发展，信息化建设

模式发生根本性转变,一场以云计算、大数据、物联网、移动应用等

技术为核心的“新

IT”浪潮风起云涌，信息化应用进入一个“新常态”。***（某政府

部门）为积极应对“互联网+”和大数据时代的机遇和挑战，适应全

省经济社会发展与改革要求，大数据平台应运而生。

大数据平台整合省社会经济发展资源，打造集数据采集、数据

处理、监测管理、预测预警、应急指挥、可视化平台于一体的大数

据平台，以信息化提升数据化管理与服务能力，及时准确掌握社会

经济发展情况，做到“用数据说话、用数据管理、用数据决策、用

数据创新”，牢牢把握社会经济发展主动权和话语权。

二、建设目标

大数据平台是顺应目前信息化技术水平发展、服务政府职能改

革的架构平台。它的主要目标是

强化经济运行监测分析，实现企业信用社会化监督，建立规范

化共建共享投资项目管理体系，推进政务数据共享和业务协同，为

决策提供及时、准确、可靠的信息依据，提高政务工作的前瞻性和

针对性，加大宏观调控力度，促进经济持续健康发展。

1、制定统一信息资源管理规范，拓宽数据获取渠道，整合业务

信息系统数据、企业单位数据和互联网抓取数据，构建汇聚式一体

化数据库，为平台打下坚实稳固的数据基础。

2、梳理各相关系统数据资源的关联性，编制数据资源目录，建

立信息资源交换管理标准体系，在业务可行性的基础上，实现数据

信息共享，推进信息公开，建立跨部门跨领域经济形势分析制度。

3、在大数据分析监测基础上，为政府把握经济发展趋势、预见

经济发展潜在问题、辅助经济决策提供基础支撑。

三、建设原则

大数据平台以信息资源整合为重点，以大数据应用为核心，坚

持“统筹规划、分步实施，整合资源、协同共享，突出重点、注重

实效，深化应用、创新驱动”的原则，全面提升信息化建设水平，

促进全省经济持续健康发展。

1、统筹规划、分步实施。结合我省经济发展与改革领域实际需

求，明确总体目标和阶段性任务，科学规划建设项目。先期完成大

数据平台的整体架构建设，后期分步完成业务系统的整合及相互间

数据共享问题。

2、整合资源、协同共享。对信息资源统一梳理，建立经济发展

与改革信息标准资源库和数据规范，逐步消灭“信息孤岛”，加快

推进数据资源整合，建设共享共用的大数据中心，实现业务协同。

3、突出重点、注重实效。以用户为中心，以需求为导向，以服

务为目的，突出重点，注重实效，加强平台可用性和易用性。

4、深化应用、创新驱动。深入了解用户需求，密切跟踪信息技

术发展趋势，不断深化应用、拓展新技术在应用中的广度和深度，

促进跨界融合，丰富管理和服务手段。

四、建设方案

为了保证项目的顺利进行和建设目标的可行性，我们采取如下

几种建设方案。

1、数据采集方案。

我们统一信息资源标准规范，建立多维度数据库，拓宽数

据来源，通过不同的方式汇聚数据，增强分析力度，提高监测

预警的准确性和时效性。

1、预留接口，支持其它系统各种数据的上传导入处理。将

现存有关经济运行业务系统中的历史数据和时效数据，通过上

传数据文件至服务器、分析提取有效数据导入服务器数据库等

方式采集起来，在本平台上复用。

2、支持外接数据的上传导入处理。可以将企业单位或定点

监测机构的数据通过同样的方式采集起来，在本平台上复用。

3、支持非结构化数据，即有哪些信誉好的足球投注网站引擎数据、社交媒体数据、

地理空间数据和音视频数据等等。

2、数据分析方案。

大数据之大并不是难点所在，其真正难以对付的挑战来自

于数据类型多样、要求及时响应和数据的不确定性，而我们所

面临的也正是如此。

我们采用批量数据处理系统，借助于深度学习、知识计算

和可视化等大数据分析技术，通过对数据的批量处理挖掘其中

的价值来支持决策和发现新的洞察。

3、业务整合方案。

在对社会发展相关业务子系统充分调研基础上，结合项目

需求，可对其进行整合或嵌入处理（本方案整合公共信用信息

服务平台、投资项目信息管理平台等）。

整合处理。将原有数据通过上传或导入方式进行采集，原有功

能模块整合到本平台中，合二为一，完美的将数据汇聚起来。缺点

是耗时较长。