02 2016 档案

hadoop编程小技巧（5）---自定义输入文件格式类InputFormat
摘要：Hadoop代码测试环境：Hadoop2.4 应用：在对数据需要进行一定条件的过滤和简单处理的时候可以使用自定义输入文件格式类。 Hadoop内置的输入文件格式类有： 1）FileInputFormat<K,V>这个是基本的父类，我们自定义就直接使用它作为父类； 2）TextInputFormat< 阅读全文
posted @ 2016-02-18 14:04 ido 阅读(606) 评论(0) 推荐(0) 编辑
mapreduce作业状态一直是ACCEPTED
摘要：搭建yarn环境后，执行 hadoop/bin/hadoop jar hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.4.1.jar wordcount /host1 /out1 执行一直停留在Running job： 打开yarn 阅读全文
posted @ 2016-02-03 16:02 ido 阅读(2374) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示