章鱼大数据大数据教学平台介绍（TV1.1）(1).docx

大数据实验实践教学与科研平台 技术方案书 TV1.1 章鱼大数据 优选创新（北京）科技有限公司  1、平台介绍 优选创新（北京）科技有限公司的大数据教学平台由“大数据实训管理系统”，“大数据教学云平台”、“大数据实验实践教学平台”构成，建设的主要目的是立足于当前大数据的时代背景，集教学、实验、培训于一体的大数据实训平台，集成业界最前沿的大数据应用，提供简单易用的管理功能，并针对教学实训的场景量身定制了实验开发调试环境、实验运行管理以及教学管理等功能，同时结合一线的实战项目，提供多行业多门类具有很强实践性的教学课程和实验课程。将实际企业大数据应用项目引入到课堂，实现学生走出校门企业可用的目标。 平台设计引入“云”的理念，使学生的学习、老师的授课不在依赖传统的教室课堂模式，随时随地进行学习实验。为学校搭建和完善大数据应用和开发的课程体系和教学实训环境。并可以此为基础帮助高校建设集培训中心、科研中心、体验中心三种功能为一体的高等级大数据教学实验中心。 整个平台从功能上可分为“管理与控制系统”、“分布式计算模块”、“大数据实训平台”、“云端实验平台”、“考试系统”、“教学资源包”等部分组成，实为学生提供多梯度、层次式的系列实验，助力学生知识点掌握和基础技能培养；为教师和学生提供毕业设计、课程设计以及科研的基础支撑，为教师学生提供良好的大数据演练环境； 1.1、技术优势 1）基于容器技术的云实验机 基于容器的轻量级虚拟化技术，相比传统KVM之类最明显的特点就是启动快，资源占用小。因此对于构建隔离的标准化的运行环境，轻量级的PaaS(如dokku), 构建自动化测试和持续集成环境，以及一切可以横向扩展的应用(尤其是需要快速启停来应对峰谷的web应用)，具有巨大的优势。本技术可以在有限的物理资源上创建多个虚拟化的实验机环境，学生可以快速启动专享的实验机。 2）基于B/S的远程桌面交互技术Y-Desktop Y-Desktop是一种HTML5和JS的Web应用程序，可使用远程桌面协议（如VNC或RDP）访问桌面环境。 同时提供了一个驱动它的API。该API可用于为其他类似的应用程序或服务提供服务。此Web应用程序是提供协议无关的远程桌面网关的一部分。作为API，Y-Desktop提供了一种通过使用HTTP或WebSocket的基于JavaScript的隧道流式传输文本数据的通用和有效的方法，以及支持Y-Desktop协议的客户端实现，并将远程显示与Y-Desktop协议流隧道。Y-Desktop使用JavaScript及HTML5和其他标准，只需要一个主流的浏览器或启用Web的设备，就可以访问所提供的任何桌面。 3）远程陪练技术 平台可以在浏览器中实现桌面分享、共享的功能，助教可以远程通过桌面操作、文字和语音来协助、陪练生，犹如面对面、手把手地指导、学习。 1.2、产品优势 1）一站式解决方案 学生可以在平台中学习、实践，以及进行评价与考核，获取专业证书，并向企业推荐，得到就业机会。 2) 真实的实践场景 核心理念：实验+实战=就业能力，实训平台应用浏览器的桌面及虚拟化技术，让学生可以随时随地学习、验证，通过真实项目的实战，达到同等互联网公司1~2年的工作经验。 3) 完整的实验课程体系 超过200个实验任务指导书，内容从入门的基础概念到生态系统的安装、算法实现、数据建模与分析、可视化技术等，覆盖了“大数据技术与应用”及“数据科学与大数据技术”专业课程实践的所有内容和要求。 4) 基于“问题驱动”的学习平台 课程设计成以“问题”和“任务”组成的知识体系，促使学生去思考、去完成任务、去解决问题，使学生真正掌握所学知识。 5) 产学研有力支撑 平台提供稳定可靠的大数据研发环境与商业应用场景，和多种行业数据及应用案例的剖析，用于课题研究、项目开发与实施，同时提供数据更新接口，为科研工作提供海量的行业数据支持，促进人才培养与产业需求紧密结合。 6）学习行为分析 实训系统全程记录、追踪学生的学习行为，通过学习行为分析，提供个性化的学习内容。 2、系统功能说明 2.1、系统构成与平台功能描述 大数据实验实践教学，平台包括高清视频课程、实验任务、实训操作及项目实战等模块；提供数量大、覆盖知识面广的实验任务，实现在线教学、实训操作、项目实战完美结合； 平台提供大数据集群管理功能，包含Hadoop、Hive、HBase、Sqoop、Flume、Spark等节点部属及管理，提供实时监控集群的CPU、内存、硬盘等使用率及相关信息，可以对管理节点、计算节点进行启动、停止等操作管理。 提供覆盖多个行业的大数据实战案例以及数据，通过对这些行业案例的深入剖析，快速提升学生的大数据实战能力。 2.1.1、系统管理模块 软件为整个系统提供管理功能，管理系统各软件，可对各软