- 1、本文档共17页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
数据处理和可视化表达
5.1 认识大数据
5.2 数据的采集
5.3 数据的分析
5.4 数据的可视化表达
第五章
第五章 数据处理和可视化表达
数据的采集
在生活中,网络购物越来越被消费者所青睐。网络购物可以足不出户,实现购物需求,还可以对商品进行比较,随意挑选。那么怎样能快速的找到评价高、价格低的商品呢?我们可以通过对商品的数据进行处理来获得相关信息。怎样快速地获得商品的相关数据呢?
分组:以4人为一组 ,讨论确定小组的项目主题
采集某购物平台python书籍的价格、评价等数据
采集某购物平台某款笔记本电脑的的价格、评价等数据
其他选题……
5.2数据的采集
项目选题、项目规划
进度安排:
项目探究与实施
5.2数据的采集
一、数据的采集方法和工具
1、网络数据采集法
网络数据采集,是指通过网络爬虫等方式,从网站上获取数据信息。
探究活动
项目探究与实施
5.2数据的采集
项目探究与实施
5.2数据的采集
1、网络爬虫是一段代码,帮助我们自动抓取网页内容。
2、爬虫工作的起点叫做种子,其实就是一个网址。程序访问这个网址,按照设定的规则采集数据。
网络爬虫是什么?
项目探究与实施
5.2数据的采集
活动1:采集商品数据
1、运行爬虫程序,爬取教材提供的模拟数据库中的商品数据
2、使用网络数据采集器采集数据
项目探究与实施
5.2数据的采集
日前,全国首例短视频平台领域的网络“爬虫”案在无锡梁溪区法院宣判,被告人丁某因犯侵入计算机信息系统程序罪被判处有期徒刑一年六个月,缓刑二年,并处罚金3万元。
2021年9月,丁某在网上结识丁某某(另案处理),后者表示有一款“爬虫”软件可以获取某短视频平台数据,通过输入关键词能筛选出视频、评论、账户等信息,批量抓取意向用户进行业务推广。丁某试用后购买代理权,组织人员通过网络向多人销售,违法所得计24360元。
我们在使用“网络爬虫”时,一定要遵守相关法律法规。
项目探究与实施
5.2数据的采集
活动2:
阅读相关材料,思考、讨论下列数据采用何种方法采集
1、当系统被别人攻击后,怎么找到攻击者留下的数据
2、怎样了解自己的身体状况,身体的各项数据
3、怎样获取班级同学的兴趣爱好等数据
项目探究与实施
5.2数据的采集
内容:
系统日志是记录系统中硬件、软件和系统问题的信息文件。
作用:
监视系统中发生的事件
检查错误发生的原因
寻找受到攻击时攻击者留下的痕迹
系统日志
项目探究与实施
5.2数据的采集
其他数据采集法
项目探究与实施
5.2数据的采集
二、数据的存储与保护
采集到的数据,你会保存在哪里?你会怎样保护这些数据?
活动3:
以小组为单位,查找资料、学习和交流讨论,数据存储的方法,你会选择哪种方法来保存数据?又该怎样保护数据?
成果分享
5.2数据的采集
回顾项目活动的整个过程,分享本节课的收获。
1、项目中采集到了什么数据,是怎样来保存和保护数据的?
2、你学到了哪些知识?学会了什么方法?
3、在小组合作中有什么体会?
4、在学习的过程中遇到了什么问题?
探究活动
项目小结
5.2数据的采集
明确数据需求
制订采集清单
数据存储保护
选择合适方法
数据的采集
探究活动
项目评价
5.2数据的采集
填写项目评价表
/vm/mWtQcK2.aspx
探究活动
项目探究与实施
5.2数据的采集
5.2数据的采集
数据是一项非常重要的资源。我们在获取数据的时候要遵守相关的法律法规,合法地采集数据。同时也要提高自己的数据保护意识,保护自己的数据安全和个人隐私。
您可能关注的文档
最近下载
- 机场场内驾驶证考试题.pdf VIP
- 冷冻水系统水力特性影响因素分析.pptx
- 安徽省第四届全省家政服务职业技能大赛家政服务员(母婴护理员)考试题库(含答案).docx
- 2024-2025学年小学信息技术(信息科技)三年级全一册义务教育版(2024)教学设计合集.docx
- 人工一体化高密度养殖土元的技术.pptx
- 辅警内部转正考试.pdf
- 数学四年级下册教案-比身高(第二课时)北师大.doc
- 标准化知识竞赛考试参考题库(200题).docx
- (初中)七年级地理上册全册典型重要知识点(挖空填空)梳理详解汇总.pdf
- GB_T 43894.1-2024 半导体晶片近边缘几何形态评价 第1部分:高度径向二阶导数法(ZDD).pdf
文档评论(0)