子墨言良

2018年4月11日

Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z

摘要： Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z 问题原因及解决方法阅读全文

posted @ 2018-04-11 17:21 子墨言良阅读(9356) 评论(0) 推荐(0) 编辑

ERROR [org.apache.hadoop.util.Shell] - Failed to locate the winutils binary in the hadoop binary path

摘要：错误日志如下：解决方法： 1.未配置环境变量-->配置环境变量HADOOP_HOME，然后重启电脑。或者代码中设置System.setProperty("hadoop.home.dir", "hadoop安装路径")。 2.还有一种可能HADOOP_HOME的bin目录下根本没有winutils. 阅读全文

posted @ 2018-04-11 17:14 子墨言良阅读(4478) 评论(0) 推荐(0) 编辑

Hadoop 3节点集群无法成功启动zookeeper

摘要： Hadoop 3节点集群无法成功启动zookeeper的原因及解决办法阅读全文

posted @ 2018-04-11 16:01 子墨言良阅读(535) 评论(0) 推荐(0) 编辑

2018年4月10日

bash:haoop:command not found

摘要： bash:haoop:command not found错误解决方案阅读全文

posted @ 2018-04-10 17:07 子墨言良阅读(5634) 评论(1) 推荐(0) 编辑

eclipse链接Hadoop集群时报错Error：Call From xxx/xxx.xxx.xxx.xxx to hostname1:9000 failed on connection exception

摘要： eclipse链接Hadoop集群时报错Error：Call From xxx/xxx.xxx.xxx.xxx to hostname1:9000 failed on connection exception 阅读全文

posted @ 2018-04-10 15:54 子墨言良阅读(2544) 评论(0) 推荐(0) 编辑

2018年4月2日

No lease on /目录: File does not exist. [Lease. Holder: DFSClient_NONMAPREDUCE_-2059237550_1, pendingcreates: 8]错误及解决方法

摘要：感觉程序员的世界真是一个变幻无常且精彩绝伦的世界，每次跑程序都会发现不一样的问题。今天跑MapReduce程序来统计邮箱次数时遇到了一个问题，明明一样的代码，别人能跑，我却跑不了。我相信，基本做这行的都遇到过这种问题。好了，话不多说，来聊聊今天的错误吧。根据日志查看到报的错误为：No lease 阅读全文

posted @ 2018-04-02 15:22 子墨言良阅读(7282) 评论(0) 推荐(0) 编辑

MapReduce实战：邮箱统计及多输出格式实现

摘要：紧接着上一篇博文我们学习了MapReduce得到输出格式之后，在这篇博文里，我们将通过一个实战小项目来熟悉一下MultipleOutputs（多输出）格式的用法。项目需求：假如这里有一份邮箱数据文件，我们期望统计邮箱出现次数并按照邮箱的类别，将这些邮箱分别输出到不同文件路径下（MultipleO 阅读全文

posted @ 2018-04-02 11:02 子墨言良阅读(556) 评论(0) 推荐(0) 编辑

2018年4月1日

MapReduce的输出格式

摘要： MapReduce的输出格式阅读全文

posted @ 2018-04-01 13:14 子墨言良阅读(2251) 评论(0) 推荐(0) 编辑

2018年3月31日

MapReduce实战：自定义输入格式实现成绩管理

摘要：实现自定义输入格式并求出每个学生的总成绩和平均成绩。阅读全文

posted @ 2018-03-31 20:49 子墨言良阅读(649) 评论(0) 推荐(0) 编辑

MapReduce的输入格式

摘要：主要讲解MapReduce的输入格式阅读全文

posted @ 2018-03-31 10:40 子墨言良阅读(425) 评论(0) 推荐(0) 编辑

公告