两个微型的Map/Reduce框架: FileMap(FM)和BashReduce

两个微型的Map/Reduce框架: FileMap(FM)和BashReduce

- FileMap ( http://mfisk.github.com/filemap/ ) 用python写成,只有一个文件,实现了基于文件的并行M/R操作

- 与此异曲同工的是,在bashReduce项目中(http://github.com/erikfrey/bashreduce/tree/master ), 有人用纯Bash脚本写了一个M/R命令 br, 实现在多个节点上的并行处理,通过netcat来交换文件 

posted @ 2010-04-27 22:04  searchDM  阅读(462)  评论(0编辑  收藏  举报