第三章数据资源管理技术.pptVIP

第三章 数据资源管理技术 学习内容： 企业数据处理(Ch7.1,7.2) 数据处理方式, 数据组织与管理 数据库技术(Ch7.3) 数据库概念,,数据库设计,数据库操作/结构化查询语言SQL,数据库技术的发展 商业智能技术(Ch7.4) 商业智能概念,数据仓库,数据挖掘/联机分析处理。 3.1 企业数据处理概述 数据处理 从某些数据推导加工出一些新的数据/信息，作为决策依据的过程，包括数据的收集、存储、计算、检索、传播等。 至60s，数据处理已成为计算机的主要应用。 企业数据处理特点 数据密集型应用。涉及大量/海量，关联数据。一般存储在大容量辅助存储器中。 数据长期保留在计算机系统中，称为持久数据。 数据为多个应用程序，多个部门,甚至在整个企业或更大范围内共享。 批量或实时处理 3.1 企业数据处理概述（cont.） 数据处理相关问题 如何存储/组织 保证数据存储的质量，便于存储和处理 如何处理(方式) 选择适当的数据处理方式，提高处理效率/快速处理 如何利用(处理功能，属于数据处理应用设计) 通过数据处理，支持企业业务运作/事务；支持企业管理控制与决策；…(创造其他价值,比如？)（数据成为资源） 如何管理 便于使用，安全、可靠。 3.1 企业数据处理概述（cont.） 数据组织与存储 数据存储 数据文件，大容量外部存储介质 一般数据文件，如.txt,.doc,.xls ,.dat 数据库/数据仓库(文件)，如.dbf,.db,.mdb 数据组织 如何在存储介质上存储－物理组织 相关问题：介质？存储位置？文件或记录的组织方式？ 便于快速存取，与存储介质、数据的操作相关 如何构成／组织文件数据(内容) －逻辑组织 相关问题：哪些数据？用户视图？数据的逻辑关系？哪些数据操作？ 满足数据需求，表达逻辑关系，便于操作，数据完整性 3.1 企业数据处理概述（cont.） 物理组织与逻辑组织 用户只考虑逻辑组织，设计者二者同时考虑 两者相互影射／转换 一般数据文件：由操作系统和应用程序完成 数据库/数据仓库：由操作系统和数据库管理系统完成 文件数据构成 字符／符号：最小数据单位。多媒体数据？ 字段／数据项：若干字符／符号构成。基本数据单位，记录事物属性 记录：相关字段集合。基本数据结构，记录事物 文件：同类记录集合。记录一类事物 数据库：逻辑上关联数据的集合,数据库文件。 数据仓库：多个数据库／文件抽取数据构成的数据集合。 3.1 企业数据处理概述（cont.） 数据处理方式 批处理 数据收集、传输、存储、加工、利用以成批方式进行。特殊情况下（如非网络/集成环境，其他）采用。 实时处理 数据收集、传输、存储、加工、利用以联机/在线方式进行。普遍采用。 联机事务处理OLTP(On-Line Transaction Processing)：对业务数据实时处理，支持企业业务运作，数据组织采用数据库技术，业务运作数据库（Operational Database） 联机分析处理OLAP (On-Line Analytical Processing): 对大量数据的实时分析/挖掘其价值，支持管理控制与决策，数据组织采用数据仓库技术或数据库技术 3.1 企业数据处理概述（cont.） 数据管理 数据更新,数据备份与恢复,转换… 用户授权: 谁(Who)?什么数据(What)?如何使用(How)? 安全管理: 加密,必威体育官网网址,访问控制. 3.2数据库技术 60s末，数据库技术作为一门新的数据处理技术发展起来。如今已成为计算机科学的一个重要分支，是计算机技术中应用最广泛的技术之一，也是信息系统的核心技术之一。 基本概念 数据库 定义：长期储存在计算机中的、有组织的、可共享的数据集合。 特点： 按照一定的数据模型组织、描述和储存 具有较小的冗余度 具有较高的数据独立性和易扩展性 集成化、标准化。可为各种用户共享。 3.2数据库技术-基本概念（cont.） 数据库管理系统(DataBase Management System，DBMS) 定义：用于建立、运用和维护数据库的数据管理软件。 主要功能： 数据定义功能。提供DDL语言，定义数据库中的数据对象 数据操纵功能。提供DML语言，实现对数据库数据的基本操作(查询、插入、删除和修改) 数据库的运行管理。保证数据的安全性、完整性、多用户对数据的并发使用，发生故障后的系统恢复 数据库的建立和维护。数据库数据批量装载，数据库转储，数据库的重组织，性能监视等 3.2数据库技术-基本概念（cont.） 3.2数据库技术-基本概念（cont.） 数据库系统(DataBase System，DBS) 定义：指在计算机系统中引入了数据库后的系统，即采用了数据库技术的计算机应用系统。一般包括DB，DBMS+OS，Users，D