文章分类 -  Hadoop问题处理

部署hadoop后，datanode无法连接namenode
摘要：参照网上方法部署完Hadoop，namenode和datanode都运行起来了，但是master的50070端口无法访问，查看datanode，发现连接不上namenode网上很多方法都试过了，包括关闭iptables，重新配置hdfs-site.xml、core-site.xml，重新format 阅读全文
posted @ 2017-11-03 13:48 AntarcticPenguin 阅读(314) 评论(0) 推荐(0)
执行start-dfs.sh，namenode无法启动
摘要：最近遇到了一个问题，执行start-all.sh的时候发现JPS一下namenode没有启动 每次开机都得重新格式化一下namenode才可以 其实问题就出在tmp文件，默认的tmp文件每次重新开机会被清空，与此同时namenode的格式化信息就会丢失 于是我们得重新配置一个tmp文件目录 首先在h 阅读全文
posted @ 2017-11-03 13:47 AntarcticPenguin 阅读(7139) 评论(0) 推荐(0)
执行start-dfs.sh，datenode没有启动
摘要：FATAL org.apache.Hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool(Datanode Uuid unassigned) service to localhost/ 阅读全文
posted @ 2017-11-03 13:47 AntarcticPenguin 阅读(281) 评论(0) 推荐(0)
在运行`sbin/start-dfs.sh`时出现错误
摘要：在运行sbin/start-dfs.sh时出现错误 ： starting namenode, logging to /usr/mahout/hadoop-0.20.2/bin/../logs/hadoop-srp-namenode-srp.out localhost: starting datano 阅读全文
posted @ 2017-11-03 13:46 AntarcticPenguin 阅读(3364) 评论(0) 推荐(0)
jps 没有输出
摘要：jps主要用来查看jvm的进程，即使没有任何jvm进程，也会输出自己的进程，如下 1 2 [hadoop@server ~]$ jps 20867 Jps 今天碰到一种情况，就是普通用户输入jps后，没有任何输出，但是root下就有输出。原因如下，jps需要在tmp下创建一个hsperfdata_u 阅读全文
posted @ 2017-11-03 13:36 AntarcticPenguin 阅读(900) 评论(0) 推荐(0)
ssh 免密码设置失败原因总结
摘要：设置ssh免密码操作的步骤： 进入主目录cd 生成公钥ssh-keygen -t rsa -P '' (注：最后是二个单引号，表示不设置密码) 然后分发公钥到目标机器ssh-copy-id -i ~/.ssh/id_rsa.pub 用户名@对方机器IP (注意不要忘记了参数-i) 注：ssh-cop 阅读全文
posted @ 2017-11-03 13:34 AntarcticPenguin 阅读(225) 评论(0) 推荐(0)
修改主机名
摘要：修改主机名的时候，遇到的问题： vi /etc/sysconfig/network 然后修改hostname 然后保存修改source /etc/sysconfig/network 然后重启，结果没有修改成功 vi /etc/hosts 修改为 然后保存修改source /etc/hosts 然后重 阅读全文
posted @ 2017-11-03 13:33 AntarcticPenguin 阅读(228) 评论(0) 推荐(0)
修改DNS、修改IP、修改网管——相关问题
摘要：修改DNS /etc/resolv.conf DNS服务器地址：8.8.8.8（google提供） 114.114.114.114（国内NDS） 如果网卡中设置了NDS，也会用网卡中的DNS 修改IP /etc/sysconfig/network-scripts/ifcfg-eth0(网卡) 设置N 阅读全文
posted @ 2017-11-03 13:25 AntarcticPenguin 阅读(437) 评论(0) 推荐(0)

//开启礼花特效的js