分布式集群系统的调研分析.ppt

分布式集群系统 ——调研分析 分布式系统/平台 proActive Parallel Suite Cluster Virtual Machine for Java（cJVM) Parallel Virtual Machine (PVM) Apache Hadoop (这里不做介绍） Apache Mesos ProActive Parallel Suite 1 ProActive Parallel Suite ProActive Parallel Suite Brief Intro: 通过ProActive 平台, 用户可以立刻对（企业级）应用进行业务优化和加速，同时可以对企业云进行管理。 Keys: 可并行、分布式、业务流程优化加速、可以集成高效的云管理。 平台关键组成：3个： Workflow Parallelization --- 各种业务的并行化 Orchestration Scheduling --- 多应用、多接口支持 Clouds Grids IaaS --- 设施上的异构资源管理 ProActive Parallel Suite Workflow Parallelization ProActive Parallel Suite Orchestration Scheduling ProActive Parallel Suite Clouds Grids IaaS ProActive Parallel Suite 可用状况: Open-sourced 组件：Studio 1.4Java Active Objects 5.4Scheduler 3.4Scheduler Web Portal 1.4Resource Manager 3.4Cloud Grid IaaS Web Portal 1.4Matlab Connector 1.2Scilab Connector 1.2 ProActive Parallel Suite 组件下载：支持windows32+64, linux32+64以及MacOS ProActive Parallel Suite 支持的编程方法：在proActive studio中，采用图形化方式设计workflows来定义并行化调度。 集群搭建的难易程度：一般，除了安装IDE外，还要配置好另外两个组件(server和agent)；但网站资料很完整。 支持的语言：JAVA, REST,CLI(命令行） Cluster Virtual Machine for Java 2 Cluster Virtual Machine for Java (cJVM) Cluster Virtual Machine for Java Brief Intro: 通过对一个集群进行虚拟化使得对应用可见的仅是单个系统；而实际上对象和线程是存在和运行于多台虚拟机上的。 优点：应用编程方便，高可扩展性? Cluster Virtual Machine for Java 核心：Java Server Applications (JSAs) Cluster Virtual Machine for Java 支持编程语言: Java 可用情况：“NOTE: This project is no longer active since 2000! ”…… 还没有找到可用资源 Parallel Virtual Machine 3 Parallel Virtual Machine (PVM) Parallel Virtual Machine Brief Intro: 使用网络连接各种异构系统（如Windows, Unix），使之看起来就像一个大型“并行计算机”。 Parallel Virtual Machine 代码示例： Parallel Virtual Machine 可用情况：Open-Sourced，提供lib还有PVM安装程序，还有详细安装/配置的说明文档； Parallel Virtual Machine Parallel Virtual Machine 支持语言： C, C++, Fortran 算法接口: 基本上是并行编程用到的基本算法，主要包含在pvm3.h中 支持环境：Windows (only NT ,95/98???) 搭建难易程度： 难，因为说明文档比较旧； 使用方式：安装installshield版本的PVM，使用源码库 Apache Mesos 4 Apache Mesos Mesos Mesos计算框架一个集群管理器，提供了有效的、跨分布式应用或框架的资源隔离和共享，可以运行Hadoop、MP