大数据分析及应用项目教程(Spark SQL)（微课版） 教案 许慧 单元1--3 大数据分析概述---学生信息处理分析 .docx

单元教学活动设计

二级学院

信息工程学院

专业

大数据技术

设计者

许慧

课程名称

大数据挖掘与分析

学年

学期

2

授课类型

□理论型，√理实一体型，□实践型

单元名称

单元1.大数据分析概述

班级

大数据技术1、2

人数

教材来源

自编教材

授课学时

4

学生学习

条件分析

1.起点分析：

(1)学生具备Linux相关操作、大数据基础运维的基本技能；

(2)学生具备自主学习能力，能主动查阅资料预习。

2.重点分析：

(1)大数据分析的相关工具。

(2)大数据分析可视化的概念及相关工具。

3.难点分析：

(1)SparkSQL的运行架构。

(2)Catalyst查询编译器的工作流程。

教学方法手段

1.教学方法：

讲授法、讨论法。

2.教学手段：

实例讲解演示。

教学资源

1.个人资源：教材、教学PPT与相关素材

2.学校资源：一体化教室、超星平台中的公共资源

3.网络、社会或出版社资源：多媒体课件、网上教学资源、精品课网站

能力指标

掌握大数据分析基础知识C1

养成良好的自我管理素养B1

提升学生沟通交流、小组协作能力E2

教学目标

知识

1.了解大数据分析的概念、特点、类别、优缺点。

2.知道大数据分析的相关工具

3.了解大数据分析可视化的概念及相关工具。

4.了解SparkSQL的背景、特点。

能力

1.知道SparkSQL的运行架构

2.掌握Catalyst查询编译器的工作流程。

素质

1.养成良好的自我管理素养

2.提升沟通交流、小组协作能力

教师课前准备

1.准备好一体化机房，保证机器正常运转，安装好软件。

2.准备好授课PPT，完成所有案例设计，熟练示范操作的过程。

3.设计学生要完成的任务。

4.设计好教学环节。

5.服装大方，自然得体。

学生课前准备

查阅资料，预习教材

活动历程

一、准备活动

1.活跃课堂气氛，自我介绍，学习通签到、点名。

2.课程定位，课程教学内容安排与考核方式介绍。

3.课程主要学习内容、学习方法介绍。

二、发展活动

1．关于大数据分析情境导入；

2．学习目标和要求；

3．提问：什么是大数据分析？

大数据的“5V”特征

大数据分析概念

大数据分析的特点

大数据分析类别

大数据分析的优势与缺点

4．提问：大数据分析工具有哪些？

Hadoop生态圈中的大数据分析工具

大数据分析编程语言

其他工具

5.关于大数据分析可视化。

三、课堂小结

大数据分析概述、工具和可视化。

——第1、2节结束——

一、准备活动

1.活跃课堂气氛，学习通签到、点名。

2.认识SparkSQL情境导入。

3.学习目标和要求。

二、发展活动

1.SparkSQL背景简介

SparkSQL的背景

SparkSQL的特点

2.SparkSQL运行原理。

SparkSQL的运行架构

Catalyst查询编译器

SparkSQL的运行原理

SessionCatalog保存元数据

ANTLR生成未绑定的逻辑计划

Analyzer绑定逻辑计划

Optimizer优化逻辑计划

SparkPlanner生成可执行的物理计划

CostModel选择最佳物理执行计划

execute执行物理计划

三、课堂小结与作业布置

1．小结：本次课程学习重点，学习过程中出现的问题与解决方法。

2．布置：完成第1章课后练习。

——第3、4节结束——

学习评量

课堂练习中巡视指导

课后作业

纸笔作业：完成第1章课后练习题。

教学后记

目标或能力指针达成度、学习表现、内容、方法、资源、业师协同等向度

1.目标或能力指标达成度

全班80%学生达到了教学目标和能力指标。

2.学习表现

课内预习阶段发现学生预习时个别同学没有带书，大部分同学没有带笔和笔记本，阅读习惯有待改进。

单元教学活动设计

二级学院

信息工程学院

专业

大数据技术

设计者

许慧

课程名称

大数据挖掘与分析

学年

学期

2

授课类型

□理论型，√理实一体型，□实践型

单元名称

单元2.实践环境准备

班级

大数据技术1、2

人数

教材来源

自编教材

授课学时

6

学生学习

条件分析

1.起点分析：

(1)了解大数据分析概述、工具和可视化；

(2)知道SparkSQL背景和运行原理。

2.重点分析：

(1)Hadoop集群环境搭建。

(2)Spark集群安装搭建。

(3)Scala下载、安装和配置

3.难点分析：

(1)Hadoop集群环境搭建。

(2)Spark集群安装搭建。

教学方法手段

1.教学方法：

讲授法、讨论法。

2.教学手段：

实例讲解演示。

教学资源