2019年6月17日
Spark之RDD依赖关系及DAG逻辑视图
摘要： RDD依赖关系为成两种：窄依赖（Narrow Dependency）、宽依赖（Shuffle Dependency）。窄依赖表示每个父RDD中的Partition最多被子RDD的一个Partition所使用；宽依赖表示一个父RDD的Partition都会被多个子RDD的Partition所使用。 一 阅读全文
posted @ 2019-06-17 17:11 |旧市拾荒| 阅读(1293) 评论(0) 推荐(1) 编辑