大学计算机教程-dj-7-数据处理与分析基础.pptx

第七章

数据处理和分析基础;第七章数据处理和分析基础;什么是数据？;数据管理技术的发展;7.1数据库系统概述;数据库系统是信息系统的核心;7.1.1数据库系统基本概念;7.1.2数据库系统的模型;概念模型（信息模型）;数据模型（逻辑模型）;存储模型（物理模型）;;7.1.4数据库系统的应用结构;7.2实体-联系模型和关系模型;7.2.1实体-联系模型;1.实体;2.实体属性;4.实体类型;;现实世界中，事物内部及事物之间的都存在着联系。

概念模型中，实体内部属性之间及实体之间也存在着联系。

联系分为：实体集内部的联系、实体集之间的联系。

两个实体集之间的联系分为以下三类：

(a)一对一联系；(b)一对多联系；(c)多对多联系

;一对一（1:1）

班级与班长，学校与校长

一对多（1:n）

辅导员与班级，班长与学生

多对多（m:n）

学生与课程、教师与学生

;矩形表示实体集(型)

实体名写在框内。

椭圆表示属性

属性名写在框内；

码用下划线标出；

用线与实体集连接，表示隶属关系。

棱形表示联系

联系名写在菱形框内；

用无向边与相关实体集连接；

联系的类型写在无向边的旁边。

;E－R模型的示例;学生;;“关系数据库之父”

1981年荣获ACM图灵奖;学号;学号;学号;7.3关系型数据库标准语言;SQL语言的功能（了解）;SQL中常用的数据类型、运算符和内部函数请参见《教材》表7.2、7.3和7.4。;向“学生”基本表中插入数据。;DELETE语句;SELECT语句;SELECT语句——查询表中的若干字段;在“学生”表中，查询学生人数、最低奖学金、最高奖学金和平均奖学金。;查询计算机专业学生的学号、姓名、性别和专业。

;39;7.4Access数据库管理系统;Access数据库的组成;创建数据库;;2.表结构的修改;3.数据的导出和导入;4.在设计视图中创建查询;;何为大数据？

大数据（BigData）是指规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合。;数据的产生;IDC：预计到2025年中国将拥有全球最大数据圈;大数据时代iscoming…;大数据的特征;结构化数据：固定格式和有限长度的数

非结构化数据：格式长短不一，如网页、图片、语音、视频等

半结构化数据：介于二者之间，如XML、LaTeX等编写的格式化文本

;7.5.2大数据的处理;数据的处理方式也大大不同;传统的处理

让所有资源在一台计算机中进行处理或者备份;传统的处理：

传输数据到程序端，数据量以TB、PB为单位，数据量大，传输慢;数据当中蕴含着非常有价值的信息，这些信息需要一套流程才能被发现，包括：

数据采集、

数据预处理、

数据处理与分析、

数据可视化等;流程;流程;流程;流程;;;;本章小结