随笔分类 -  hadoop1

摘要:0.说明 Hadoop集群已经运行正常,现在新买了一些机子,要加入到集群里面增加新的节点。以下就是增加的过程。 1.配置运行环境 安装与master和其他slave相同的java环境,jdk版本要相同。具体安装过程这里不再赘述。 修改新节点的ip和主机名对应关系,修改/etc/hosts配置文件,定 阅读全文
posted @ 2016-11-09 20:00 FEFJay 阅读(11804) 评论(0) 推荐(0) 编辑
摘要:Hadoop1.2.1异常Bad connect ack with firstBadLink (No route to host ) 0.说明 Hadoop集群之前运行正常,增加了新节点之后,需要执行负载均衡等相关操作,执行过程当中出现问题。 1.运行异常 查看master上面的日志信息,发现: 也 阅读全文
posted @ 2016-11-09 16:01 FEFJay 阅读(2110) 评论(0) 推荐(0) 编辑
摘要:注意:原来的数据全部被清空了。产生了一个新的hdfs 1. 删除已有目录 1.1 查看hdfs site.xml 将 dfs.name.dir和dfs.data.dir所指定的目录删除 1.2 查看core site.xml 将Hadoop.tmp.dir所指定的目录删除。 2.删除历史HDFS,重 阅读全文
posted @ 2016-11-08 20:22 FEFJay 阅读(3636) 评论(0) 推荐(0) 编辑
摘要:0. 说明 系统中首先要安装好jdk环境。 已经配置ssh免密码登录。 设置好防火墙,或者关闭防火墙。 如果集群内机器的环境完全一样,可以在一台机器上配置好,然后把master配置好的软件即hadoop 1.2.1整个文件夹拷贝到其他slave机器的相同位置即可。 1. 环境准备 本次配置使用了两个 阅读全文
posted @ 2016-11-08 20:20 FEFJay 阅读(438) 评论(0) 推荐(0) 编辑