2017年9月21日

「hadoop」log4j参考
摘要： <?xml version="1.0" encoding="UTF-8"?><!DOCTYPE log4j:configuration SYSTEM "log4j.dtd"><log4j:configuration> <!-- 将日志信息输出到控制台 --> <appender name="Cons 阅读全文
posted @ 2017-09-21 18:31 trako 阅读(260) 评论(0) 推荐(0) 编辑
「hadoop」win7 idea maven hadoop 运行WordCount示例
摘要： 运行一个简单的hadoop实例，已自测成功。 假设已安装如下环境： 1、win7跑三台ubuntu虚拟机，虚拟机已成功安装hadoop2.8.1环境； 2、win7安装idea工具 idea2017； 3、win7安装hadoop2.8.1环境，并已配置相关的环境变量； 4、拷贝windows用的已 阅读全文
posted @ 2017-09-21 18:26 trako 阅读(330) 评论(0) 推荐(0) 编辑
「hadoop」一些问题集
摘要： 【master:9000访问 refused】 check下host地址映射，用IP替代master试试 【访问HDFS目录】 $hdfs dfs -ls hdfs://master:9000/ 注意：结尾带/表示目录 阅读全文
posted @ 2017-09-21 17:57 trako 阅读(72) 评论(0) 推荐(0) 编辑
「hadoop」hadoop启动需要相关的命令（仅供本人使用）
摘要： #拷贝配置文件cp -R /mnt/hgfs/D/SharedFiles/etc/hadoop/* /usr/hadoop/etc/hadoop #拷贝日志到win7cp -R /usr/hadoop/logs/* /mnt/hgfs/D/SharedFiles/logs#清除缓存文件rm -rf 阅读全文
posted @ 2017-09-21 11:37 trako 阅读(177) 评论(0) 推荐(0) 编辑
「hadoop」fs.defaultFS 9000 端口在外面连不上
摘要： 【问题现象】 三台虚拟机，分别为master，slave1，slave2，按网上步骤配置启动hadoop后，就是没有DataNode，从slave1的日志上看，是由于请求被refuse掉了。 【问题解决】 在master的host文件IP映射中会默认把master映射到127.0.0.1，需要注释掉 阅读全文
posted @ 2017-09-21 11:18 trako 阅读(380) 评论(0) 推荐(0) 编辑

导航