咖啡猫

导航

2014年10月18日 #

Map-Reduce的工作机制

摘要: Mapper“Map-Reduce”的思想就是“分而治之”Mapper负责“分”,即把复杂的任务分解为若干个“简单的任务”而执行“简单的任务”有几个意思:1、数据或计算规模相对于原任务要大大缩小;2、就近计算,即会被分配到存放了所需数据的节点进行计算。3、这些小任务可以并行计算,彼此间没有相互依赖的... 阅读全文

posted @ 2014-10-18 18:06 咖啡猫1292 阅读(300) 评论(0) 推荐(0) 编辑