DreamWorks

Never say Never。
  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2013年7月16日

摘要: MapReduce是一个用于大规模数据处理的分布式计算模型,通过Map函数来处理一个Key/value对以便生成一批中间的Key/Value对,再定义一个reduce函数将所有这些中间的、有着相同的Key的values合并起来。例如:map:(k1,v1)→list(k2,v2) reduce:(k2,list(v2))→list(k3,v3)其MapReduce编写的大致模板如下:MapReduce的创建1、Map过程的创建public static class Map extends Mapper{ public void map(K1 k1,V1 v1,Context conte... 阅读全文

posted @ 2013-07-16 21:54 _Babyface 阅读(561) 评论(0) 推荐(0) 编辑