摘要：
val NONE = new StorageLevel(false, false, false, false) val DISK_ONLY = new StorageLevel(true, false, false, false) val DISK_ONLY_2 = new StorageLevel 阅读全文
posted @ 2018-07-31 14:50 打杂滴 阅读(149) 评论(0) 推荐(0) 编辑
2018年7月31日
摘要：
cache只有一个默认的缓存级别MEMORY_ONLY ，而persist可以根据StorageLevel设置其它的缓存级别。 cache以及persist都不是action。 被重复使用的(但是)不能太大的RDD需要cache cache 只使用 memory，checkpoint写磁盘 rdd. 阅读全文
posted @ 2018-07-31 11:13 打杂滴 阅读(602) 评论(0) 推荐(0) 编辑