2020年1月3日
Spark调优指南
摘要： Spark相关问题 Spark比MR快的原因？ 1) Spark的计算结果可以放入内存，支持基于内存的迭代，MR不支持。 2) Spark有DAG有向无环图，可以实现pipeline的计算模式。 3) 资源调度模式：Spark粗粒度资源调度，MR是细粒度资源调度。 资源复用：Spark中的task可 阅读全文
posted @ 2020-01-03 08:08 岚樱 阅读(490) 评论(0) 推荐(0) 编辑