2015年4月21日
MapReduce的执行过程.
摘要： 作业在运行时,数据或者是作业调用的一个运行图. 用户写的代码通过JobClient提交给JobTracker Job对象中封装了JobClient JobConf和我们的Job对象几乎是一回事. 把我们的代码打包成jar包,上传到hdfs中,JobClient就会获得一个jar包在... 阅读全文
posted @ 2015-04-21 01:09 小丁子 阅读(441) 评论(0) 推荐(0) 编辑
单词计数WordCountApp.class
摘要： public class WordCountApp { // 可以指定目录,目录下如果有二级目录的话,是不会执行的,只会执行一级目录. private static final String INPUT_PATH = "hdfs://hadoop1:9000/abd";// 输入路径 ... 阅读全文
posted @ 2015-04-21 00:45 小丁子 阅读(246) 评论(0) 推荐(0) 编辑
使用Ant发布hadoop代码到服务器
摘要： 首先,搭建Ant环境: 1.1.下载antzip包,可以直接从官网下,也可以从我的csdn账号下载,这里我使用的Ant版本是:apache-ant-1.8.4-bin CSDN Ant 所需jar包下载地址 1.2.将apache-ant-1.8.4-bin.zip包解压,然后添加... 阅读全文
posted @ 2015-04-21 00:28 小丁子 阅读(378) 评论(0) 推荐(0) 编辑