《大数据技术基础》教案 第5课 数据采集与预处理(一).pdfVIP

课题数据采集与预处理（一）

课时2课时（90min）

知识技能目标：

（1）了解数据的主要来源和常用的数据采集方法。

（2）了解常用的日志采集系统和ETL工具。

（3）了解分布式发布与订阅消息系统Kafka。

教学目标（4）了解网络爬虫的概念、原理、分类及应用。

思政育人目标：

感受我国在运用大数据保障和改善民生方面的改革创新举措，如重要产品追溯体系

建设、农业农村数据采集体系建设等，不断拓宽知识视野，提升专业能力和社会责任感，

立志让大数据在强化民生服务、弥补民生短板上发挥更大作用。

教学重点：常用的日志采集系统和ETL工具。

教学重难点

教学难点：使用网络爬虫工具对网络数据进行采集。

教学方法案例分析法、问答法、讨论法、讲授法

教学用具电脑、投影仪、多媒体课件、教材

第1节课：考勤（2min）→案例导入（10min）→传授新知（23min）→课堂讨论（10

min）

教学设计

第2节课：问题导入（5min）→传授新知（20min）→合作学习（15min）→课堂小

结（3min）→作业布置（2min）

教学过程主要教学内容及步骤设计意图

第一节课

培养学生的组

考勤【教师】使用APP

织纪律性，掌握学

（2min）

【学生】按照老师要求签到生的出勤情况

【教师】讲述“公交驾驶员生命体征数据采集”案例，并提

出以下问题：通过案例导入

案例导入除了对公交驾驶员的生命体征进行数据采集外，你还知道哪些的方法，引导学生

（10min）对社会有益的数据采集？主动思考，激发学

【学生】聆听、思考、举手回答生的学习兴趣

传授新知【教师】通过学生的回答引入要讲的知识，介绍数据的的主通过教师的讲

（23min）要来源和常用的数据采集方式解和演示，互动以

一、数据的主要来源及案例，使学生了

✈【教师】通过多媒体展示数据的来源教学内容解数据的来源和

日常生活中方方面面的数据都是大数据的来源，可大致分为内数据的采集方法

部数据和外部数据。其中，内部数据来源于企业（或机构）的内部，

由内部运作经营而产生；外部数据则来源于企业（或机构）的外部，

如通过交换、购买