02-联想大数据教学与科研方案建议书v1.0.docxVIP

联想大数据实验室解决方案

联

联想（北京）有限公司

1、系统简述

联想公司于1984年在中国北京成立，是全球第一大个人电脑厂商之一，也是PC%2B产品领域领导厂商，2016年《财富》世界500强企业排名第202位。联想客户遍布全球160多个国家，凭借创新的产品、高效的供应链和强大的战略执行，联想专注于为全球用户提供卓越的个人和企业信息技术产品。联想集团在全球开发、制造和销售可靠、优质、安全易用的科技产品及优质专业的服务，产品线包含Think品牌商用个人电脑、Idea品牌的消费个人电脑、服务器、工作站以及包括平板电脑和智能手机等的一系列移动互联网终端，并提供基于大数据的互联网服务。联想大数据团队及平台产品研发起始于2011年。历经5年时间持续投入，形成了目前国内领先、产品成熟度高的大数据分析平台，并拥有一支研发能力强大、应用经验丰富、实施能力强、专业化程度高的大数据团队。联想大数据团队可以从大数据系统平台、分析应用和咨询服务、运维服务等多个方面为客户提供有力保障。

联想大数据实验教学与科研平台由“大数据实训实验教学平台”,“大数据科研平台”两大部分构成，建设的主要目的是立足于当前大数据的时代背景，集教学、实验、培训于一体的大数据实训平台，集成业界最前沿的大数据应用，提供简单易用的管理功能，并针对教学实训的场景量身定制了实验开发调试环境、实验运行管理以及教学管理等功能，同时结合一线的实战项目，提供多行业多门类具有很强实践性的教学课程和实验课程。将实际企业大数据应用项目引入到课堂，实现学生走出校门企业可用的目标。

平台设计引入“云”的理念，使学生的学习、老师的授课不在依赖传统的教室课堂模式，随时随地进行学习实验。为学校搭建和完善大数据应用和开发的课程体系和教学实训环境。并可以此为基础帮助高校建设集培训中心、科研中心、体验中心三种功能为一体的高等级大数据教学实验中心。

平台具有使用简便、运行高效、易于扩展、安全可靠等特点，可以帮助高校、企业快速实现内部数据和外部数据的融合，给高校与企业带来极佳的数据计算与分析挖掘能力，辅助发掘隐藏在数据背后的巨大商业价值，加快从数据到业务的价值实现。

1.1、系统构成

大数据实验实践教学及科研平台，主要由“实训系统”与“科研与实战平台”组成，平台包括高清视频课程、实验任务、实训操作及项目实战等模块；提供数量大、覆盖知识面广的实验任务，实现在线教学、实训操作、项目实战完美结合；

平台提供大数据集群管理功能，包含Hadoop、Hive、HBase、Sqoop、Flume、

Spark等节点部属及管理，提供实时监控集群的CPU、内存、硬盘等使用率及相关信息，可以对管理节点、计算节点进行启动、停止等操作管理。提供覆盖多个行业的大数据实战案例以及数据，通过对这些行业案例的深入剖析，快速提升学生的大数据实战能力。

通过大数据平台的构建，帮助高校实现了内部数据和外部数据的快速融合，从而带来极佳的数据计算和分析挖掘能力。通过基于X86架构的大数据平台构建，在显著降低系统建设成本的同时，可提供强大的横向扩展能力。帮助高校建立了一套可靠可信的数据管控机制，提供元数据管理、数据标准管理、数据质量管理、数据安全等功能。

1.2、技术特点

1.2.1、基于云端实验的教学平台

1）基于容器技术的云实验机

基于容器的轻量级虚拟化技术，相比传统KVM之类最明显的特点就是启动快，资源占用小。因此对于构建隔离的标准化的运行环境，轻量级的PaaS(如dokku),构建自动化测试和持续集成环境，以及一切可以横向扩展的应用(尤其是需要快速启停来应对

峰谷的web应用)，具有巨大的优势。本技术可以在有限的物理资源上创建多个虚拟化的实验机环境，学生可以快速启动专享的实验机。

2）基于B/S的远程桌面交互技术Y-Desktop

Y-Desktop是一种HTML5和JS的Web应用程序，可使用远程桌面协议（如VNC或RDP）访问桌面环境。同时提供了一个驱动它的API。该API可用于为其他类似的应用程序或服务提供服务。此Web应用程序是提供协议无关的远程桌面网关的一部分。作为API，Y-Desktop提供了一种通过使用HTTP或WebSocket的基于JavaScript的隧道流式传输文本数据的通用和有效的方法，以及支持Y-Desktop协议的客户端实现，并将远程显示与Y-Desktop协议流隧道。Y-Desktop使用JavaScript及