网站大量收购独家精品文档,联系QQ:2885784924

Hadoop大数据开发基础与案例实战(微课版)课件 5.8 YARN安装(完).pptx

Hadoop大数据开发基础与案例实战(微课版)课件 5.8 YARN安装(完).pptx

  1. 1、本文档共15页,可阅读全部内容。
  2. 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多

Hadoop大数据项目开发——YARN安装

目录content01YARN的安装简介02YARN的安装

0%100%YARN不需要单独安装只需要修改Hadoop中的配置文件YARN的安装简介

YARN:资源调度平台主要作用:资源管理作业调度两个进程:ResourceManagerNodeManagerYARN的安装简介

YARN集群部署规划如下所示:ResourceManager很消耗内存,不要和NameNode、SecondaryNameNode配置在同一个节点上。节点masterslave1slave2HDFS节点NameNodeDataNodeSecondaryNameNodeDataNodeDataNodeYARN节点NodeManagerNodeManagerResourceManagerNodeManagerYARN的安装简介

是Yarn平台的主节点;负责整个集群的所有资源的统一管理和调度;接收来自各个NodeManager节点的资源汇报信息;并把这些信息按照一定的策略分配给各个应用程序。ResourManagerYARN的安装简介

是Yarn平台的从节点;每个节点都会有自己的NodeManager;整个集群有多个,负责每个节点上的资源和使用;负责接收处理来自ResourceManager的资源分配请求,分配具体的容器给应用。NodeManagerYARN的安装简介

步骤1:修改配置文件yarn-site.xml配置文件所在位置YARN的安装

修改core-site.xml配置文件内容指定ResourceManager运行在slave2节点YARN的安装

修改core-site.xml配置文件内容需配置成mapreduce_shuffle,才可运行MapReduce程序YARN的安装

YARN的安装步骤2:拷贝yarn-site.xml到另外两个节点,执行如下命令:

步骤3:启动YARN集群在slave2节点上启动YARN集群,执行启动命令,执行成功之后会出现以下内容:YARN的安装

步骤4:在三个节点上执行jps命令master节点salve1的节点salve2的节点YARN的安装

步骤5:节点启动成功,通过http://slave2:8088访问Web界面,通过浏览器监测YARN的运行状态salve2的节点YARN的安装

本章小结本节介绍YARN的安装,相信大家对YARN有了更深入的理解,为我们后续理解将MapReduce程序提交给YARN运行打下了坚实的基础。

您可能关注的文档

文档评论(0)

lai + 关注
实名认证
内容提供者

精品资料

版权声明书
用户编号:7040145050000060

1亿VIP精品文档

相关文档