Mengdong的技术博客

学习,记录,分享

导航

2011年7月2日 #

《Data-intensive Text Processing with MapReduce》读书笔记第2章:MapReduce基础(2)

摘要: 本读书笔记的目录地址:http://www.cnblogs.com/mdyang/archive/2011/06/29/data-intensive-text-prcessing-with-mapreduce-contents.html2.3 执行框架MapReduce最伟大的地方在于它分离了编写并行算法的what和how(你只需要写程序,而不需要为它怎么执行操心). 而对这一点贡献颇大的就是执行框架:它处理了几乎所有底层执行的细节,并且能够保证MapReduce集群具有从几个节点增长到数千节点的扩展能力。具体来说,包括以下一些职责:1) 调度每项MapReduce工作(job)都被分解为多个 阅读全文

posted @ 2011-07-02 11:38 mdyang 阅读(1241) 评论(0) 推荐(0) 编辑