代码改变世界

yarn环境的搭建

2016-01-04 21:23  Mandylover  阅读(488)  评论(0编辑  收藏  举报

1.首先,在zookeeper搭建成功,服务运行的基础上搭建yarn,其次,保证时间一致

2.在 /home/install/hadoop-2.5/etc/hadoop目录下配置一下几个配置文件:

第一个:yarn-site.xml

<configuration>
 <property>
   <name>yarn.resourcemanager.ha.enabled</name>
   <value>true</value>
 </property>
 <property>
   <name>yarn.resourcemanager.cluster-id</name>
   <value>cluster1</value>
 </property>
 <property>
   <name>yarn.resourcemanager.ha.rm-ids</name>
   <value>rm1,rm2</value>
 </property>
 <property>
   <name>yarn.resourcemanager.hostname.rm1</name>
   <value>node1</value>
 </property>
 <property>
   <name>yarn.resourcemanager.hostname.rm2</name>
   <value>node4</value>
 </property>
 <property>
   <name>yarn.resourcemanager.zk-address</name>
   <value>node1:2181,node2:2181,node3:2181</value>
 </property>
<property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
</property>
</configuration>

mv mapred-site.xml.template mapred-site.xml
第二个:mapred-site.xml

将配置好的文件复制到其它虚拟机上(node2、node3、node4)

scp mapred-site.xml yarn-site.xml root@node2:/home/install/hadoop-2.5/etc/hadoop/

3.接着,启动yarn:start-yarn.sh

4.在node4的hadoop-2.5里创建test目录:hdfs dfs -mkdir /test,然后启动resouremanager:yarn-daemon.sh start resouremanager

5.查看进程,看是否有resouremanager

6.在浏览器里分别输入http:node1:8088 和node4:8080,查看结果