- 1、本文档共32页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
2021 年全国职业院校技能大赛高职组“大数据技术与应用”赛项任务书
2021 年全国职业院校技能大赛
高职组
“大数据技术与应用”
赛项赛卷(GZ-2021041-5 卷)
任
务
书
(共30 页)
参赛队编号:
1
2021 年全国职业院校技能大赛高职组“大数据技术与应用”赛项任务书
背景描述
据央视财经报道,2020 年我国O2O 市场规模突破万亿元,O2O 市
场存在着巨大的潜力。特别是餐饮和外卖行业,占据市场较大份额,
并且业务增长迅速。截至 2020 年底,全国外卖总体订单量已超过
171.2 亿单,同比增长7.5%,全国外卖市场交易规模达到8352 亿元,
同比增长14.8%。我国外卖用户规模已接近5 亿人,其中80 后、90
后是餐饮外卖服务的中坚消费力量,消费者使用餐饮外卖服务也不再
局限于传统的一日三餐,下午茶和夜宵逐渐成为消费者的外卖新宠。
为把握这一商业机遇,ChinaSkills 公司计划进驻外卖平台市场,现
需对大规模成熟外卖平台进行详细评估调研,采集多方多维度数据,
寻找行业痛点,摸清市场需求,以技术为手段为投资保驾护航。
为完成该项工作,你所在的小组将应用大数据技术,以 Python、
Java、Scala 作为整个项目的基础开发语言,基于大数据平台综合利
用Spark、MySQL、Scrapy、Flask、ECharts 等,对数据进行获取、
处理、清洗、挖掘、分析、可视化呈现,力求实现对公司未来的重点
战略方向提出建议。
你们作为该小组的技术人员,请按照下面任务完成本次工作,并
编制综合报告。
2
2021 年全国职业院校技能大赛高职组“大数据技术与应用”赛项任务书
模块A :大数据平台及组件的部署管理(15 分)
环境说明:
编号 节点类型 节点IP 地址 用户名 密码
1 Master 192.168.5.188 root 123456
2 Slave1 192.168.5.182 root 123456
3 Slave2 192.168.5.181 root 123456
补充说明:各节点可通过客户端XShell 工具进行SSH 访问;
Master 节点MySQL 数据库用户名/密码:root/123456;
相关软件安装包在Master 节点的/chinaskills 目录下,请选择对
应的安装包进行安装,用不到的可忽略;
所有模块中应用命令必须采用绝对路径。
任务一:Hadoop 完全分布式部署管理
本环节需要使用root 用户完成相关配置,安装Hadoop 需要配置前置环
境。命令中要求使用绝对路径,具体部署要求如下:
1、将master 节点JDK 安装包解压并移动到/usr/local/src 路径,将命令复制
并粘贴至客户端桌面 【Release\模块A 提交结果.docx】中对应的任务序号
下;
2、修改/root/.bash_profile 文件,设置JDK 环境变量,配置完毕后在master
节点分别执行“java”和“javac”命令,将命令行执行结果分别截图并粘贴
至客户端桌面 【Release\模块A 提交结果.docx】中对应的任务序号下;
3、请完成host 相关配置,将三个节点分别命名为master、slave1、slave2,
从master 复制上面步骤配置的J
您可能关注的文档
- GZ-2021031嵌入式技术应用开发赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021033光伏电子工程的设计与实施赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021034物联网技术应用赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021035网络系统管理赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021037虚拟现实(VR)设计与制作赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021038信息安全管理与评估赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021039移动应用开发赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021040云计算赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021043护理技能赛项正式赛卷(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
- GZ-2021044中药传统技能赛项正式赛卷1(完整版包括试题、答案、评分标准以及全部附件)-2021年全国职业院校技能大赛赛项正式赛卷 .pdf
文档评论(0)