2017年安徽省职业院校技能大赛高职组.docVIP

2017年安徽省职业院校技能大赛高职组“大数据技术与应用”项目竞赛规程 一、项目名称 大数据技术与应用 二、竞赛目的 本赛项的设置，是为适应大数据开发应用产业对高素质技术技能型人才的职业需求，围绕对Hadoop集群的安装部署、管理及MapReduce计算，并包含大数据处理相关算法应用与软件工具运用。赛项选取典型的大数据真实业务分析应用场景，重点检验参赛选手掌握大数据业务分析方法和方案架构能力、运用Hadoop及相关工具软件解决具体业务问题的能力，激发学生对大数据知识和技术的学习兴趣，提升学生职业素养和职业技能，努力为中国大数据应用产业发展储备及输送新鲜血液。 以大数据应用技能大赛，搭建校企合作的平台，提升高职电子信息类及相关专业毕业生能力素质，满足企业用人需求，实现行业资源、企业资源与教学资源的有机融合，使高职院校在专业建设、课程建设、人才培养方案和人才培养模式等方面，跟踪社会发展的必威体育精装版需要，缩小人才培养与行业需求差距，促进专业教学建设和教学改革。 三、竞赛时间和地点 时间：3月15日前结束，具体时间待定。 地点：芜湖职业技术学院南校区（安徽省芜湖市弋江区文津西路）。 四、竞赛方式和内容 （一）竞赛方式 大数据技术与应用赛项为团体赛。每支参赛队由3名参赛选手组成，须为同校在籍学生，其中队长1名。每支参赛队可配2名指导教师。指导教师须为本校专兼职教师。同一学校的报名参赛队不超过2支。参赛选手和指导教师报名获得确认后不得随意更换。 竞赛时间为4个小时，竞赛连续进行。 （二）竞赛内容 1、在Hadoop平台环境下，对于大规模并行数据分析以及内存计算技术的应用能力。 2、基于大数据实训平台，综合运用数据抽取工具Sqoop/Flume/Kafka、分布式存储系统HDFS、分布式计算框架MapReduce/Yarn、内存计算Spark、流式计算Storm、数据挖掘方法库Mahout、数据仓库Hive、深度学习等工具和技术，匹配和连接数据源，完成大数据的提取、清洗、转换、分析、挖掘操作，产生分析结果。 3、根据国家标准提交标准化的工程验收文件，同时依据项目应用需求和分析结果，完成标准化的大数据分析报告。竞赛知识与技能点见表1。 表1：竞赛知识与技能点 序号 内容模块 具体内容 1 数据预处理 解决数据乱码问题 2 数据分隔符统一 3 数据清洗 4 基于Hive构建有哪些信誉好的足球投注网站日志数据仓库 创建分区表，并导入数据 5 多维数据分析 条数统计 6 关键词分析 7 用户查询次数分析 8 用户行为分析 9 文档输出 根据以上内容，输出详细的说明文档 五、竞赛规则 1、竞赛时间为4个小时，竞赛过程连续进行。 2、参赛队的竞赛工位号采用抽签方式确定。赛题以任务书形式发放，竞赛参考资料在赛前植入参赛选手的计算机，参赛队根据任务书要求完成竞赛任务。 3、组委会统一布置竞赛需要的软硬件环境。选手不得私自携带任何移动存储、辅助工具、移动通信等进入赛场。 4、参赛选手报到当天可预先熟悉比赛场地，但不得进行现场练习。参赛选手按规定时间到达指定地点，凭参赛证、学生证和身份证（三证必须齐全）进入赛场。选手迟到10分钟取消比赛资格。 5、参赛选手不得携带通讯工具和其它未经允许的资料、物品进入比赛场地，不得中途退场。如出现违规、违纪、舞弊等现象，经裁判组裁定给予处分直至取消比赛成绩。 6、竞赛过程中，参赛选手应严格遵守赛场纪律和操作规程，确保设备和人身安全，并接受裁判员的监督和警示。如遇设备或软件等故障，参赛选手应举手示意，赛场裁判长、技术人员等应及时予以解决。确因计算机软件或硬件故障，致使操作无法继续的，由裁判长视具体情况做出裁决。 7、若参赛选手欲提前结束比赛，应向裁判员举手示意，竞赛终止时间由裁判员记录，参赛选手结束竞赛后不得再进行任何操作。 8、现场竞赛结束，经裁判员确认后方可离开赛场。 9、各赛项由裁判员现场评分，经裁判长签字确认后予以公布，如有异议请直接向大赛仲裁工作组申请复核。 10、其它未尽事宜，将在赛前向各领队做详细说明。 六、竞赛场地和环境标准 竞赛现场设置场内竞赛区、现场裁判工作区、技术支持区等。 场内竞赛区为参赛队提供统一的竞赛设备；无需选手自带任何工具及附件。 监考人员协助裁判长和现场裁判做好负责工位范围内的秩序维持，监考人员不得在考场内随意走动。 技术支持保障人员在技术支持服务区候场，有需要时在现场裁判的带领下到相关的工位进行赛场技术支持保障，在条件具备时，技术支持区可不设置在考场内。 竞赛现场通风良好、照明符合教室采光规范。竞赛现场符合消防安全规定，现场消防器材和消防栓合格有效，应急照明设施状态合格，赛场明显位置张贴紧急疏散图，赛场地面张贴荧光疏散指示箭头，赛场出入口专人负责，随时保证安全通道的畅通无阻。 各工位分区供