摘要: spark和mapreduce差不多,都是一种计算引擎,spark相对于MapReduce来说,他的区别是,MapReduce会把计算结果放 在磁盘,spark把计算结果既放在磁盘中有放在内存中,mapreduce把可能会把一个大任务分成多个stage,瓶颈发生在IO,spark有一个叫DAG(有向 阅读全文
posted @ 2019-08-09 14:32 踩在浪花上 阅读(1294) 评论(0) 推荐(0) 编辑