ClouderaManager产品讲解.pdfVIP

Cloudera Manager 产品介绍 1. 介绍 Cloudera Manager 是 CDH 市场领先的管理平台。作为业界第一的端到端 Apache Hadoop 的管理应用，Cloudera Manager 对CDH 的每个部件都提供了细 粒度的可视化和控制，从而设立了企业部署的标准。通过Cloudera Manger，运 维人员得以提高集群的性能，提升服务质量，提高合规性并降低管理成本。 Cloudera Manager 设计的目的是为了使得对于企业数据中心的管理变得简 单和直观。通过Cloudera Manager，可以方便地部署，并且集中式的操作完整的 大数据软件栈。该应用软件会自动化安装过程，从而减少了部署集群的时间。通 过Cloudera Manager 可以提供一个集群范围内的节点实时运行状态视图。同时， 还提供了一个中央控制台，可以用于配置集群。不仅如此，Cloudera Manager 通过包含一系列的报道和诊断工具，可以帮助您优化集群性能，并且提高利用率。 Cloudera Manager 能够为您提供以下的功能：  自动化Hadoop 安装过程，大幅缩短部署时间；  提供实时的集群概况，例如节点、服务的运行状况；  提供了集中的中央控制台对集群的配置进行更改。  包含全面的报告和诊断工具，帮助优化性能和利用率。 Cloudera Manager 的架构如上图所示，主要由如下几部分组成：  服务端/Server：Cloudera Manager 的核心。主要用于管理web server 和应 用逻辑。它用于安装软件，配置，开始和停止服务，以及管理服务运行的集 群。  代理/agent ：安装在每台主机上。它负责启动和停止的进程，部署配置，触 发安装和监控主机。  数据库/Database ：存储配置和监控信息。通常可以在一个或多个数据库服 务器上运行的多个逻辑数据库。例如，所述的 Cloudera 管理器服务和监视 后台程序使用不同的逻辑数据库。  Cloudera Repository：用于软件分发由Cloudera 软件仓库。  客户端/Clients：提供了一个与Server 交互的接口：  管理平台/Admin Console ：提供一个管理员管理集群和 Cloudera Manage 的基于网页的交互界面。  API ：为开发者提供了创造自定义Cloudera Manager 程序的API 。 2. 功能 此部分内容在免费版本Cloudera Express 产品以及商业版本中可用。 2.1. 管理 2.1.1. 参数配置 . 可视化参数配置界面 . 过期设置报警 配置过期需要重启 客户端配置过期 . 智能参数验证及优化 2.1.2. 管理员权限管理 对系统管理员、数据库管理员及其他管理员必须授予不同级别的管理权限。 2.2. 监控 Cloudera Manager 提供了许多监控功能，用于监测群集 （主机，服务守护进程） 健康、组件性能以及集群中运行的作业的性能和资源需求。具体包括以下监控功 能：  服务监控 查看服务和角色实例级别健康检查的结果，并通过图表显示，有助于诊断问 题。如果健康检查发现某个组件的状态需要特别关注甚至已经出现问题，系 统会对管理员应该采取的行动提出建议。同时，系统管理员还可以查看上的 服务或角色上操作的执行历史，也可以查看配置更改的审计日志。  主机监控 监控群集内所有主机的有关信息，包括：哪些主机上线或下线，主机上目前 消耗的内存，主机上运行的角色实例分配，不同的机架上的主机分配等等。 汇总视图中显示了所有主机群集，并且可以进一步查看单个主机丰富的细节， 包括显示主机关键指标的直观图表。  行为监控 Cloudera Manager 提供了列表以及图表的方式来查看集群上进行的活动，不