大数据分析系统项目方案.docx

\* ROMAN \* ROMAN IV 大数据分析系统方案 目 录 第 1 章 1.1 1.2 1.3 第 2 章 2.1 2.2 2.3 2.4 第 3 章 3.1 3.2 3.3 3.4 第 4 章 4.1 工程概述 5 工程背景 5 工程必要性 5 建设目标 6 需求分析 8 功能及性能需求 8 系统集成需求 9 运行环境 10 安全需求 10 总体设计 12 总体设计原则 12 总体目标 13 系统总体构造 13 系统规律构造 15 具体设计方案 16 信息资源规划和数据库设计 16 数据模型概述 16 数据建模方法论 17 数据建模根本原则 18 数据库架构设计 19 数据应用支撑系统设计 21 大数据平台关键技术 21 云平台数据共享功能 26 数据效劳层计 33 模型的应用 33 平台根底应用 33 数据处理和存储系统设计 34 大数据处理核心技术 35 数据存储承受MPP 与 hadoop 融合架构 35 网络系统设计 35 安全系统设计 36 系统安全满足状况 36 \l “_TOC_250004“ 系统安全配置治理功能 37 \l “_TOC_250003“ 系统无安全漏洞保障 40 \l “_TOC_250002“ 软件自身安全 43 \l “_TOC_250001“ 性能和牢靠性 44 \l “_TOC_250000“ 运行维护系统设计 46 效劳器治理 46 网络设备治理 46 进程治理 46 效劳治理 46 数据库治理 46 中间治理 46 集群治理 47 故障治理 47 性能治理 47 配置文件治理 47 SYSLOG治理 47 其他系统设计 47 系统配置及软硬件选型原则 48 软硬件部署 48 数据要求 48 技术要求 49 系统软硬件物理部署方案 49 第 5 章 5.1 5.2 5.3 5.4 5.5 5.6 5.6.1 工程建设与运行治理 51 工程领导机构 51 工程治理机构 51 工程承建机构 53 运行维护机构 53 相关治理制度 54 工程测试 55 单元测试 55 集成测试 55 系统测试 56 性能测试 56 验收测试 57 安装测试 57 安全性测试 58 功能验证 58 漏洞扫描 58 模拟攻击试验 58 工程验收 60 工程验收要求 60 工程验收的目的和原则 61 工程验收的组织和实施 61 工程验收的步骤和程序 61 工程验收的测试方案 61 工程验收的文档清单 61 第 6 章 6.1 工程培训打算 62 培训对象和培训目标 62 6.2 培训内容 62 10 第1章 工程概述 工程背景 目前，随着 JW 改革的不断推动，XX 网络系统、信息中心、信息安全系统的规模不断扩大，各类信息应用系统日趋简单，迫切需要借助云计算平台，实现敏捷、高效的 软硬件资源安排和治理，从而有效整合 XX 的各类信息资源，提升 XX 信息系统的安全性、稳定性、可扩展性。另一方面，随着社会公共安全治理的日趋简单，XX 行业通过大数据应用，把大量的关联信息进展汇总处理，可以重认知和感知我们的外部环境。不但能快速锁定疑犯，而且还可以预防和打击犯罪。XX 云计算+大数据系统，将成为面对各 J 种的治理和分析利器，通过高效的云计算平台供给强大的大数据应用承载力量， 面对各 J 种供给集中资源、集中治理、集中监控、配套实施的统一大数据应用环境， 为各 J 实战应用供给强大支撑、效劳、保障作用。云计算和大数据是转变将来XX 工作进展的趋势，并且已经实实在给XX 科技治理与创来了深刻的变革，有力地推动了XX 各 J 种的工作优化和提升。 工程必要性 第一，构建“才智 XX”是将来 JW 形态演进的必定趋势。 近年来，随着 XX 信息化建设的持续推动，我国 XX 机关的 JW 改革已开头迈进智能化进展的快车道，JW 与人之间的相互感 知和联系越来越严密 ，“XX 大数据分析系统”建设已成为当代 JW 进展的趋势。 其次，构建“才智 XX”是一轮信息技术变革下的时代潮流。 当前，全球正进展物联网、移动互联网、云计算等一轮信息技术变革。技术往往孕育着的重大突破，信息资源成为重要的 XX 战斗力要素，信息化不仅成为推动 XXJW 方式变革的重要引擎，也给整个社会治理创带来深刻变化。 “XX 大数据分析系统”建设将极大地创 XX 治理方式，促进“管制型 XX”向“效劳型 XX”转变。应当说，经过最近十年的进展，以网络化、数字化为载体的信息化 JW 特征日益显现，JW 活动中人、事、物之间的互动力量显著 增加，JW 工作传载的功能不断增多， 智能化程度逐步提高 ，“XX 大数据分析系统”建设已成为现代信息技术变革下的时代潮流。 第三，构建“才智 XX”是推动 XX