2016年2月22日
多个Mapper和Reducer的Job
摘要： 多个Mapper和Reducer的Job@(Hadoop)对于复杂的mr任务来说，只有一个map和reduce往往是不能够满足任务需求的，有可能是需要n个map之后进行reduce，reduce之后又要进行m个map。在hadoop的mr编程中可以使用ChainMapper和Cha... 阅读全文
posted @ 2016-02-22 21:21 蒋源德 阅读(181) 评论(0) 推荐(0) 编辑
多个Mapper和Reducer的Job
摘要： 多个Mapper和Reducer的Job@(Hadoop)对于复杂的mr任务来说，只有一个map和reduce往往是不能够满足任务需求的，有可能是需要n个map之后进行reduce，reduce之后又要进行m个map。在hadoop的mr编程中可以使用ChainMapper和Cha... 阅读全文
posted @ 2016-02-22 21:20 蒋源德 阅读(3144) 评论(0) 推荐(0) 编辑