hadoop版本选择和伪分布式安装的问题
首先,自己在搭建遇到的问题是50070的端口号,无法访问,排查了一下才知道配置参数细节上的问题。首先从主机上着手,排查得知:主机里面没有name node,了解知道core-site.xml的配置有问题:
错误配置误点:
另外需要配置:secondnamenode
我们只需要在hdfs-site.xml配置即可:
value:3表示你的集群机器有多少,这里表示有3台,也可以设置一台为单机。
这个Hadoop2 指的是你 辅助机器 (seconnamenode)要放在哪个上面,配置参数直接复制就可以,上图方便参考,
<!-- 指定HDFS副本的数量 -->
<property>
<name>dfs.replication</name>
<value>3</value>
</property>
<property>
<name>dfs.namenode.secondary.http-address</name>
<value>hadoop2:50090</value>
</property>
<!--获取文件夹写入权限-->
<property>
<name>dfs.permissions.enabled</name>
<value>false</value>
</property>
<property>
<name>dfs.replication</name>
<value>3</value>
</property>
<property>
<name>dfs.namenode.secondary.http-address</name>
<value>hadoop2:50090</value>
</property>
<!--获取文件夹写入权限-->
<property>
<name>dfs.permissions.enabled</name>
<value>false</value>
</property>
配置完后,保存并退出,然后进行
格式化一下,命令是:hdfs namenode -format
接着使用以下命令:
stop-dfs.sh
start-dfs.sh
关闭防火墙
再访问IP:50070
再访问IP:8088
基本没啥问题!