2014年7月5日
用python写MapReduce函数——以WordCount为例
摘要： 尽管Hadoop框架是用java写的，但是Hadoop程序不限于java，可以用python、C++、ruby等。本例子中直接用python写一个MapReduce实例，而不是用Jython把python代码转化成jar文件。 例子的目的是统计输入文件的单词的词频。 输入：文本文件 输出：文本（每行 阅读全文
posted @ 2014-07-05 22:47 jihite 阅读(78066) 评论(5) 推荐(3) 编辑
hadoop安装配置——伪分布模式
摘要： 1. 安装这里以安装hadoop-0.20.2为例先安装java,参考这个去着下载hadoop解压tar -xzf hadoop-0.20.22. 配置修改环境变量vim ~/.bashrcexport HADOOP_HOME=/home/rte/hadoop-0.20.2 #这里为实际hado... 阅读全文
posted @ 2014-07-05 11:14 jihite 阅读(1927) 评论(0) 推荐(1) 编辑