2017年10月21日
Spark- Spark基本工作原理
摘要： Spark特点： 1.分布式 spark读取数据时是把数据分布式存储到各个节点内存中 2.主要基于内存（少数情况基于磁盘，如shuffle阶段） 所有计算操作，都是针对多个节点上内存的数据，进行并行操作的 3.迭代式计算 对分布式节点内存中的数据进行处理，处理后的数据可能会移动到其他节点的内存中，当 阅读全文
posted @ 2017-10-21 08:59 RZ_Lee 阅读(667) 评论(0) 推荐(0) 编辑