MapReduce阅读

1.mongodb权威指南6.4章

2.百科:http://baike.baidu.com/link?url=fl9FwgNq7gtFLwJ-GuKsJ25Uk-wnhgDjEwkKd8-5hoIkhJAjoA-dXPIL42PDZ3Xn-ea_JPt_U6k-Pw2rM7Cjg_

3.google三大论文之Google MapReduce

 

MapReduce最大的应用就是分布式计算上,MapReduce库。

主要优势:

高容错性(应对网络和机器故障),

负载均衡(动态分配任务,执行到最后的备用任务机),

节约带宽(尽量使用在本地的数据,map端可以进行combiner),

可靠稳定

并发分布式

 

 

hadoop就是从此来的

应用如网络爬虫结果的索引建立

posted @ 2015-08-26 11:53  vanishfan  阅读(167)  评论(0编辑  收藏  举报