2017年4月19日
MapReduce中map并行度优化及源码分析
摘要： mapTask并行度的决定机制 一个job的map阶段并行度由客户端在提交job时决定，而客户端对map阶段并行度的规划的基本逻辑为：将待处理数据执行逻辑切片（即按照一个特定切片大小，将待处理数据划分成逻辑上的多个split），然后每一个split分配一个mapTask并行实例处理。 FileInp 阅读全文
posted @ 2017-04-19 16:20 暴躁IT老绵羊 阅读(5962) 评论(0) 推荐(3) 编辑