2019年4月29日
spark算子
摘要： 1.map 一条一条读取 2.flatMap 扁平化 3.mapPartitions 一次读取一个分区数据 4.mapPartitionsWithIndex 一次读取一个分区数据，并且知道是哪个分区的 5.reduce 6.reduceBykey 7.union 合并，但不去重 8.join 9.g 阅读全文
posted @ 2019-04-29 18:47 问题不大1 阅读(251) 评论(0) 推荐(0) 编辑