MapReduce的完整逻辑
摘要:
MapReduce的完整逻辑 1、读取文件,将文件解析成一个<k1,v1>对 这里面的k1主要指的是行数,v1指的是该该行数据 2、通过mapTask任务将<k1,v1>转化为我们需要的<key,value>对 主要是对v1进行拆分 3、分区和分组,将<key,value>对进行哈希编码,主要对ke 阅读全文
posted @ 2021-05-02 07:59 黄文超 阅读(239) 评论(0) 推荐(0) 编辑