频道栏目
首页 > 网络 > 云计算 > 正文

Yarn入门教程之yran集群搭建教程

2018-01-08 14:01:56      个评论    来源:LHWorldBlog的博客  
收藏   我要投稿

一。前述

有了上次hadoop集群的搭建,搭建yarn就简单多了。废话不多说,直接来

二。规划

\

三。配置如下

yarn-site.xml配置


yarn.nodemanager.aux-services
mapreduce_shuffle//定义yarn的机制



yarn.resourcemanager.ha.enabled//是否使用HA
true



yarn.resourcemanager.cluster-id cluster1



yarn.resourcemanager.ha.rm-ids//集群逻辑节点
rm1,rm2



yarn.resourcemanager.hostname.rm1//集群物理节点
node03



yarn.resourcemanager.hostname.rm2//集群物理节点
node04



yarn.resourcemanager.zk-address//与zookeeper通信
node02:2181,node03:2181,node04:2181


mapred-site.xm配置

mapreduce.framework.name//使用yran
yarn


PS :slaves中既是datanode配置同时也是nodemanger的配置

四。配置免密

同样需要配置resourcemange到nodemanager的免密 和两个resourcemanger的免密
五。启动顺序
养成一个好习惯,先把集群停掉,然后再添加配置,(其实不停也行)

手动先启动hdfs集群start-dfs.sh

然后再启动yarn集群 start-yarn.sh

然后再手动启动resourcemanger

yarn-daemon.sh start resourcemanager

六。验证

\

\

自此集群搭建成功!!!

上一篇:hive开发教程之静态分区和动态分区
下一篇:Spark实战之Spark2.0环境搭建教程
相关文章
图文推荐

关于我们 | 联系我们 | 广告服务 | 投资合作 | 版权申明 | 在线帮助 | 网站地图 | 作品发布 | Vip技术培训 | 举报中心

版权所有: 红黑联盟--致力于做实用的IT技术学习网站