第1章数据仓库的概念与体系结构.ppt

* * * * * * * * * * * * * * * * * * * * * * * 数据仓库与数据挖掘 * 1.4 数据仓库系统的体系结构 逻辑型数据集市和实时数据仓库的体系结构 逻辑型数据集市和实时数据仓库的体系结构 特征 逻辑数据集市并不是物理上分离的数据库 数据被放到数据仓库而不是分离的分段传输区域中 新的数据集市可以非常快速地创建 数据集市总是必威体育精装版的 * 数据仓库与数据挖掘 * * 数据仓库与数据挖掘 * 1.5 数据仓库的产生、发展与未来 数据仓库的产生 数据库 关系数据库 联机事务处理 联机分析处理 * 数据仓库与数据挖掘 * 数据仓库的产生 数据仓库的产生 联机事务处理系统（业务系统）刚上线时，查询不到数据是因为数据太少了，而几十年后查询不到有关数据是因为数据太多了 专门为业务数据的统计分析建立一个数据中心，它的数据从联机事务处理系统中来、从异构的外部数据源来、或从脱机的历史业务数据中来，这个数据中心也是一个联机系统，它专门为分析统计和决策支持应用服务，通过它可获取决策支持和联机分析应用所需要的一切数据。这个数据中心就叫做数据仓库 数据仓库就是一个作为决策支持和联机分析应用系统数据源的结构化数据环境，数据仓库要研究和解决的问题就是从数据库中获取信息的问题 数据仓库的产生 数据仓库与数据库的关系 关系数据库系统是数据仓库的核心数据环境 关系数据库是针对联机事务处理 数据仓库是针对联机分析处理 * 数据仓库与数据挖掘 * * 数据仓库与数据挖掘 * 1.5 数据仓库的产生、发展与未来 数据仓库的发展 以报表为主 以分析为主 以预测模型为主 以营运导向为主 以实时数据仓库、自动决策应用为主 * 数据仓库与数据挖掘 * 1.5 数据仓库的产生、发展与未来 数据仓库的未来 数据抽取方面 未来的技术发展将集中在系统集成化方面 将互连、转换、复制、调度、监控纳入标准化的统一管理 以适应数据仓库本身或数据源可能的变化 使系统更便于管理和维护 * 数据仓库与数据挖掘 * 1.5 数据仓库的产生、发展与未来 数据仓库的未来 数据管理方面 未来的发展将使数据库厂商明确推出数据仓库引擎，作为数据仓库服务器产品与数据库服务器并驾齐驱 数据表现方面 数理统计的算法和功能将普遍集成到联机分析产品中，并与Internet/Web技术紧密结合 1.6 小结 数据仓库的概念、特点、构成、分类 数据挖掘 数据处理 * 数据仓库与数据挖掘 * 作业 习题1至习题12 * 数据仓库与数据挖掘 * ROLAP * 数据仓库与数据挖掘 * MOLAP * 数据仓库与数据挖掘 * * * * * * * * * * * * * * * * * * * * * 数据仓库与数据挖掘 数据仓库与数据挖掘 * 数据仓库与数据挖掘 * 第1章 数据仓库的概念与体系结构 主讲：张莉 Email：zhangliml@suda.edu.cn 历史数据的处理方法 删除已经失效的历史数据 介质备份后删除 建立数据仓库系统 * 数据仓库与数据挖掘 * * 数据仓库与数据挖掘 * 1.1 数据仓库的概念、特点与组成 数据仓库的概念 数据仓库就是一个面向主题的（Subject Oriented）、集成的（Integrate）、相对稳定的（Non-Volatile）、反映历史变化（Time Variant）的数据集合，通常用于辅助决策支持（DDS） * 数据仓库与数据挖掘 * 1.1 数据仓库的概念、特点与组成 数据仓库的特点： 面向主题 数据仓库中的数据是按照一定的主题域进行组织的 集成 数据仓库中的数据是在对原有分散的数据库数据作抽取、清理的基础上经过系统加工、汇总和整理得到的 * 数据仓库与数据挖掘 * 1.1 数据仓库的概念、特点与组成 数据仓库的特点： 相对稳定 数据操作主要是数据查询和定期更新 数据加载后，将作为数据档案长期保存 反映历史变化 数据仓库中的数据通常包含较久远的历史数据 * 数据仓库与数据挖掘 * 1.1 数据仓库的概念、特点与组成 数据仓库的组成： 数据仓库数据库； 数据抽取工具； 元数据：技术元数据与业务元数据； 访问工具； 数据集市（Data Marts）； 数据仓库管理； 信息发布系统。 * 数据仓库与数据挖掘 * 数据仓库的组成 数据仓库数据库 核心 是数据信息存放的地方 对数据提供存取和检索支持 数据抽取工具 提取数据，进行转换、整理，再存放 转换的内容： 删除对决策分析没有意义的数据 转换到统一的数据名称和定义 计算统计和衍生数据 填补缺失数据 统计不同的数据定义方式 * 数据仓库与数据挖掘 * 数据仓库的组成 元数据 描述数据仓库数据的结构和建立方法的数据 技术元数据 设计和管理人员用于开发和管理数据仓库时使用