2017年8月24日
Spark的wordcount程序产生多少个RDD？
摘要： 思考：在spark的wordcount过程一共产生多少个RDD？ 通过该命令（scala> rdd.toDebugString）可以查看RDD的依赖关系 （6个，除了图中的五个，rdd.saveAsTextFile也还会产生一个RDD） 接下来一步步分析（通过查看spark源码进行分析） (1) s 阅读全文
posted @ 2017-08-24 20:24 卡丽熙 阅读(814) 评论(0) 推荐(0) 编辑