摘要: MapReduce: 分布式的计算框架 缺点:执行速度慢 IO瓶颈 ==> 磁盘IO 网络IO shuffle机制:数据需要输出到磁盘,而且每次shuffle都需要进行排序操作 框架的机制: 只有Map和Reduce两个算子,对于比较复杂的任务,需要构建多个job来执行 当存在job依赖的时候,jo 阅读全文