hadoop format 重新格式化
前文:如果格式化完之后,使用jps命令发现进程都已经启动,但是使用web页面打不开hadoop的网页,可能原因就是防火墙没关或者是哪个配置过程配错了。
1.关闭防火墙
一般最好是关闭防火墙比较关闭。 systemctl stop firewalld.service 关闭防火墙; 禁止自动启动就用 systemctl disable firewalld.service . 就可以了。
还有个防火墙是selinux: 要设置为 vi /etc/selinux.config
关闭再重新访问网页还是不行,需要检查配置是否出错。
(我在配置的过程中是因为忘记把hdfs-site.xml.template文件重命名为hdfs-site.xml)。
每次格式化后,名称结点 的clusterID(集群ID)会被新建,而数据结点的clusterID还是原来的,造成名称结点和数据节点的clusterID不一致。
2. 停止Hadoop所有进程
$ stop-all.sh
3. 删除在core-site.xml和hdfs-site.xml中指定的data文件夹下面的数据
[root@zhf123 tmp]# pwd /opt/module/cdh/hadoop-2.5.0-cdh5.3.6/data/tmp [root@zhf123 tmp]# ls dfs nm-local-dir [root@zhf123 tmp]# rm -rf ./*
4. 删除$HADOOP_HOME目录下的logs和tmp目录(关键步骤)
$ cd $HADOOP_HOME $ ls bin include libexec logs README.txt share etc lib LICENSE.txt NOTICE.txt sbin tmp $ rm -rf logs tmp
5. 重新格式化文件系统
$ hdfs namenode -format
6. 启动Hadoop进程
$ start-all.sh
7. 确认Hadoop进程是否已开启
$ jps 7366 NameNode 8278 Jps 7640 SecondaryNameNode 7849 ResourceManager 7482 DataNode 7967 NodeManager
8.重新使用浏览器访问hdfs页面
OK,没问题了,大功告成。
参考链接:
https://blog.csdn.net/qq_42881421/article/details/82958839
https://blog.csdn.net/hylpeace/article/details/88371411
如果您觉得阅读本文对您有帮助,请点一下“推荐”按钮,您的“推荐”将是我最大的写作动力!欢迎各位转载,但是未经作者本人同意,转载文章之后必须在文章页面明显位置给出作者和原文连接,否则保留追究法律责任的权利。
分类:
大数据开发
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
· 理解Rust引用及其生命周期标识(上)
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
· 没有源码,如何修改代码逻辑?
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)