2018年11月3日
spark复习笔记(6):RDD持久化
摘要： 在spark中最重要的功能之一是跨操作在内存中持久化数据集。当你持久化一个RDD的时候，每个节点都存放了一个它在内存中计算的一个分区，并在该数据集的其他操作中进行重用，持久化一个RDD的时候，节点上的每个分区都会保存到内存中，这使得将来的action更加的快。 缓存技术是迭代算法和交互式查询的重要工 阅读全文
posted @ 2018-11-03 21:13 stone1234567890 阅读(319) 评论(0) 推荐(0) 编辑