数据仓库总体设计报告_精品.doc

文档编号 产品版本 密级 1.0 共87页 数据仓库系统 总体设计 文档作者：__ ____日期：2001/12/20 项目经理：__ ____日期：2001/12/28 部门经理：__ __ 日期：2002/01/08 总 工 办：__ ____日期：2002/01/08  目 录 1 概述 7 1.1 背景 7 1.1.1 待开发的软件系统名称 8 1.1.2 系统的基本概念 8 1.1.3 项目组名称 8 1.1.4 项目代号 8 1.2 术语和缩写词 8 1.3 设计目标 9 2 系统设计 9 2.1 设计原则 9 2.2 系统结构 11 2.2.1 子系统划分 11 2.3 系统数据结构 17 2.3.1 逻辑结构 12 2.3.2 层次结构 13 2.3.3 网络拓扑结构 14 2.3.4 网络层次结构 16 2.4 行业特殊需求 17 2.5 底层数据库（仓库）设计 19 2.5.1 设计原则 19 2.5.2 数据现状 20 2.5.3 数据存储整体规划 21 2.6 ETL系统 24 2.6.1 需求规定 24 2.6.2 运行环境 24 2.6.3 设计思想 24 2.6.4 结构说明 25 2.6.5 处理流程 26 2.7 系统管理 27 2.7.1 需求规定 27 2.7.2 运行环境 28 2.7.3 设计思想 28 2.7.4 结构说明 28 2.7.5 处理流程 29 2.8 数据展现 30 2.8.1 需求规定 30 2.8.2 运行环境 32 2.8.3 设计思想 32 2.8.4 结构说明 32 2.8.5 处理流程 34 2.9 界面设计 34 2.9.1 需求规定 34 2.9.2 主程序界面 34 2.9.3 主要页面设计 35 2.10 接口设计 38 2.10.1 外部接口 38 2.10.2 内部接口 39 2.11 安全设计 39 2.11.1 网络安全 39 2.11.2 数据库安全 42 2.12 系统可靠性设计 43 2.12.1 可靠性 43 2.12.2 可维护性 43 2.12.3 可扩展性 44 2.12.4 健壮性 44 2.12.5 性能保证 44 2.12.6 出错处理 45 2.12.7 备份与恢复 45 2.13 运行设计 46 2.14 相关工具选择 46 2.14.1 数据库选择 47 2.14.2 WEB服务器和应用服务器 47 2.14.3 数据库建模工具 48 2.14.4 分析型工具 48 2.14.5 OLAP工具介绍 49 2.14.6 ORACLE公司OLAP介绍 50 2.15 开发环境 51 2.15.1 硬件环境 51 2.15.2 操作系统 51 2.15.3 开发语言 52 2.15.4 数据库系统 52 2.15.5 中间件系统 52 2.15.6 应用系统 53 3 系统调试和测试 53 3.1 目的 53 3.2 基本要求 54 3.2.1 测试计划 54 3.2.2 测试说明 54 3.2.3 测试环境建立 54 3.2.4 测试报告 54 3.3 应遵循的原则 54 3.4 测试方法 55 3.5 测试重点 55 4 项目进度 56 4.1 项目资源计划 56 4.1.1 项目组 56 4.1.2 数据仓库领导小组办公室 56 4.2 项目工期计划 56 4.3 时间进度计划 56 4.3.1 数据仓库系统需求调查与两会系统 57 4.4 第一期开发主题 57 4.5 第二期开发主题 57 4.6 工作量分配计划 57 5 小结 58 6 参考文献 60 7 附录 61 7.1 Oracle性能评估报告 61 7.2 主流WEB服务器比较 65 7.3 IBM小型机性能评估报告 76 7.4 详细网络拓扑图及设备清单 78 7.5 在多层体系结构下建立数据仓库 83 摘 要 数据仓库系统的建立可以解决传统数据库不能很好提供分析决策功能的问题，可以发掘历史数据中隐含的大量有价值的信息，为国民经济的发展和宏观决策提供大量有效的参考信息。系统数据来源复杂，在数据仓库设计中不能采用常规方法解决问题；主题众多且分析热点会随时间变化而变化，要求主题下所含的信息在一定范围可变；主题下指标可能需要调整等实际情况，这和数据仓库的数据的不可修改性有矛盾；等等。我们结合数据仓库的特点和系统实际情况，提供了一套完整的数据仓库系统的解决方案。整个数据仓库系统从数据采集到数据展现共分为四部分：1、数据抽取、转换、加载；2、系统管理（包括数据库维护）；3、数据展现；4、支撑整个系统的数据库的设计(包括ETL中间数据库和数据仓库)保证系统具有相当的灵活性。各个部分独立完成本部分功能，同时紧密协作组成数据仓库系统。数据