云平台数据治理项目技术方案.docx

PAGE PAGE 10 云平台数据治理项目 云平台数据治理项目 技术方案 目 录 第 1 章 整体方案 4 1.1 项目需求理解方案 4 1.1.1 项目背景 4 1.1.2 项目概述 4 1.1.2.1 项目现状 4 1.1.2.2 项目目标 6 1.1.2.3 项目内容 7 1.2 总体设计方案 8 1.2.1 总体定位及目标 8 1.2.2 设计原则及约束 9 1.2.2.1 总体设计原则 9 1.2.2.2 总体设计约束 10 1.2.3 总体应用架构设计 11 1.2.4 总体数据架构设计 12 1.2.4.1 数据框架设计 13 1.2.4.2 数据框架细化设计 14 1.3 数据治理方案 16 1.3.1 概述 16 1.3.2 数据管理制度与机制 16 1.3.3 数据标准与规范建设 17 1.3.3.1 一致性维度标准 19 1.3.3.2 基础数据项体系标准 19 1.3.4 元数据管理 22 1.3.4.1 元数据管理总体分析 22 1.3.4.2 元数据管理设计 27 1.3.5 数据质量管理 30 1.3.5.1 数据质量管理总体分析 31 1.3.5.2 数据质量管理设计 32 1.3.6 数据生命周期管理 35 1.3.6.1 数据生命周期总体分析 36 1.3.6.2 数据生命周期管理设计 41 1.3.7 数据归集 44 1.3.7.1 数据归集流程设计 44 1.3.7.2 数据归集方法设计 45 1.3.8 数据资产管理 46 1.3.8.1 数据资产分类 47 1.3.8.2 数据资产盘点 47 1.3.8.3 数据质量评估 47 1.3.8.4 数据资产使用情况监控 47 数据安全管理 48 安全管控机制建设 48 数据访问权限管理 49 数据分级分类管理 49 数据脱敏管理 49 数据安全审计 49 第1章 整体方案 项目需求理解方案 项目背景 云平台数据管理项目基于大数据技术和理念， 以云平台为基础， 集中、拓宽和整合内外部数据资源， 统一规范数据应用范畴， 为各需求主体提供更为全面丰富的决策和参考支持， 构建开放协作的税务数据生态环境。 项目自开工建设以来， 始终以“用数据服务征管方式转变”为建设主线，在大数据算法应用、海量用户 支持、关系云图、风险动态积分、用户画像等方面进行了积极探索、实践，出色 完成了设定任务， 达到了预期效果。 目前， 云平台数据管理项目已从验证阶段转为生产应用阶段， 实现了以数据为中心， 以技术基础平台为依托， 以分析类应用实现为目标，涵盖数据“采、存、通、用”全生命周期的一体化生态系统，是大 数据、互联网＋、云计算等理念、方法论、技术手段和解决方案的集成展现。 在云平台数据管理项目建设完成的基础上， 总局云平台数据管理升级完善及运维和机构改革软件服务工作的主要任务是： 以云平台数据管理项目建设内容为基础，做好现有硬、软件运行维护与优化升级；进一步拓宽数据集成范围、拓展 数据应用、深度挖掘数据价值；根据机构改革后云平台数据管理工作的新内容、 新要求，对数据层、应用层进行调整、优化，保障云平台平稳运行；有力加强数 据治理、提高数据质量， 满足当前数据管理工作需要， 支撑各类型数据应用工作需求，助力推动征管模式变革和各项税收政策改革， 最终形成推动数据管理思维变化，营造良好税收数据生态。 项目概述 项目现状 云平台数据管理项目以云平台为基础， 以云服务器软件、 负载均衡软件 SLB、 对象存储软件 OSS、大数据计算服务软件 ODP、S 数据可视化引擎 DataV 等 18 款 大数据产品为依托， 构建了以数据治理为核心、 以一体化云平台为载体、 满足各类用户需求的税收大数据平台。主要完成平台层、数据层、应用层的建设： 平台层建设。 主要包括计算存储和网络设备、 系统软件工具集、 安全及运维监控管理的建设， 从硬件和技术层面有效解决传统技术结构不足以支撑海量数据及非结构化数据分析应用需求的矛盾， 搭建灵活、可随时调用计算资源的数据云环境，并构建完整的三层服务模式。通过建设 IaaS 层，为全国数据大集中环境提供包括 CPU、内存、存储、网络、操作系统等基础设施资源，提高资源的利 用率，降低采购成本；通过建设 PaaS平台，基于 IaaS 提供的能力，以服务的方式提供计算平台和软件组合， 为最终用户提供云环境下的应用开发、 部署和运行 平台，解决应用软件开发的规范化问题， 降低系统运行维护成本； 通过建设 SaaS 层，全国数据大集中环境为总局、省局、纳税人、相关部门提供个性化的数据服务。 数据层建设。 通过构建数据治