摘要: 概述 本lab将用go完成一个MapReduce框架,完成后将大大加深对MapReduce的理解。 Part I: Map/Reduce input and output 这部分需要我们实现common_map.go中的doMap()和common_reduce.go中的doReduce()两个函数 阅读全文
posted @ 2019-03-20 20:36 gatsby123 阅读(583) 评论(0) 推荐(0) 编辑
摘要: 概述 MapReduce是由JeffreyDean提出的一种处理大数据的编程模型,用户定义map和reduce函数,map函数处理原始数据生成一系列键值对中间数据,reduce函数并合相同key的键值对。 编程模型 整个计算过程输入的是键值对,输出的也是键值对。用户只需要提供两个函数分别是Map和R 阅读全文
posted @ 2019-03-20 17:12 gatsby123 阅读(531) 评论(0) 推荐(0) 编辑