先电“云计算技术与应用”国赛平台产品2016版本说明.doc

先电云计算技术与应用”国赛平台产品版本说明 一、国赛 本版本基于2015年先电“云计算技术与应用”国赛版本，新增先电云网络平台软件特性如下： 先电大数据平台软件 先电大数据平台软件是新增平台软件，该平台软件集成了Hadoop、Hive、Hbase、Pig、等，其有以下特性： 提供HDFS和MapReduce服务，共同组成了Hadoop分布式系统体系结构的核心。HDFS在集群上实现分布式文件系统，MapReduce在集群上实现了分布式计算和任务处理。 支持大数据集群部署HDFS采用master/slave架构。 支持Hive数据仓库服务，Hive构建于Hadoop的HDFS和MapReduce之上，用于管理和查询结构化/非结构化数据的数据仓库。 支持分布式列数据库HBase， Hadoop HDFS为HBase提供了高可靠性的底层存储支持，Hadoop MapReduce为HBase提供了高性能的计算能力，Zookeeper为HBase提供了稳定服务和failover机制。 支持大型数据处理，Pig为大型数据集的处理提供更高层次的抽象，与MapReduce相比，Pig提供了更丰富的数据结构，一般都是多值和嵌套的数据结构。 支持IaaS云平台的整合。通过整合可以实现大数据集群的模板化批量部署、管理。实现不同集群规模、不同大数据平台版本的部署。 通过先电大数据平台，可以掌握Hadoop单机部署、伪分布式部署、分布式部署方法。 掌握MapReduce运行机制，实现大数据的并行处理运算。 掌握大数据分布式文件系统，掌握分布式文件系统存储机制、管理、运维。 掌握Hive数据仓库搭建、使用、管理、运维。 掌握分布式列数据库HBase的搭建、管理、使用运维。 掌握大型数据的处理机制Pig的搭建、管理、使用。 掌握大数据平台与云平台的整合方法。 先电云网络平台软件 先电云网络平台软件是云平台软件平台，可以实现网络资源的虚拟化，其有以下特性： 系统支持SDN软件定义网络，支持可编程的平台，支持用户自定义管理网络。 SDN的ODL模块，包括分为南向接口和协议的插件、控制器平台、网络应用业务和服务模块。 支持对ODL的开发模块，包括YANG,XML,MAVEN,JAVA,RESTAPI 支持创建和启动SDN网络拓扑结构，支持OpenFlow1.3协议。 支持管理云平台Neutron网络和Open vSwitch网络拓扑，支持检测网络运行状态。 提供将IaaS平台的网络功能与硬件分离，加大数据转发，降低硬件的复杂度和成本，提高网络的响应速度。 支持整合厂商的的SDN交换机管理。 新增加的云计算网络平台软件，可以让学生掌握以下技术技能： 通过云网络的搭建过程，掌握Linux网络服务的运行流程。 通过学习OpenvSwitch相关知识，Linux的底层网络结构。 通过学习Neutron的网络配置，理解OpenStack的网络结构和网络拓扑。 学习OpenDayLight的原理，掌握基本的SDN知识，了解云网络的基本概念。 通过学习ODL提高和锻炼学生的编程能力。 国赛先电云基础架构 (IaaS)平台V1. 先电云基础架构 (IaaS)平台，在V1.服务批量安装rpm，提供安装的批量shell脚本，新增内容包括： 增加数据库安装脚本：iaas-install-mysql.sh。 增加keystone服务安装脚本：iaas-install-keystone.sh。 增加glance服务安装脚本：iaas-install-glance.sh。 增加nova服务安装脚本：iaas-install-nova-controller.sh和iaas-install-nova-compute.sh。 增加neutron服务安装脚本：iaas-install-neutron-controller.sh和iaas-install-neutron-compute.sh。 增加创建网络脚本：iaas-install-neutron-controller-flat.sh、iaas-install-neutron-controller-gre.sh和iaas-install-neutron-controller-vlan.sh。 增加dashboard服务安装脚本：iaas-install-dashboard.sh 增加cinder服务安装脚本： iaas-install-cinder-controller.shiaas-install-cinder-compute.sh。 增加swift服务安装脚本： iaas-install-swift-controller.shiaas-install-swift-compute.sh。 增加heat服务安装脚本：iaas-insta