2014年3月11日

mapreduce (七) 几个实例

摘要： http://hi.baidu.com/hzd2712/item/d2465ae65270ab3e4cdcaf55MapReduce几个典型的例子 在Google的《MapReduce: Simpli ed Data Processing on Large Clusters》论文中，作者... 阅读全文

posted @ 2014-03-11 15:06 雨渐渐 阅读(579) 评论(0) 推荐(0) 编辑

hadoop输出统计

摘要： 阅读全文

posted @ 2014-03-11 10:19 雨渐渐 阅读(145) 评论(0) 推荐(0) 编辑

管道式编程 查找，排序等

摘要： 读取Sep-2013下面的所有log文件，并扔进管道cat /home/hadoop/Sep-2013/*/* | python ipmappper.py | sort | python ipreducer.pyvim 1.txtdong xi chengxi dong chengwo ai bei... 阅读全文

posted @ 2014-03-11 09:55 雨渐渐 阅读(234) 评论(0) 推荐(0) 编辑

导航