Spark算子与RDD基本转换
摘要:
map 将一个RDD中的每个数据项,通过map中的函数映射变为一个新的元素。 输入分区与输出分区一对一,即:有多少个输入分区,就有多少个输出分区。 flatMap 属于Transformation算子,第一步和map一样,最后将所有的输出分区合并成一个。 使用flatMap时候需要注意:flatMa 阅读全文
posted @ 2019-03-01 17:24 herman很慢 阅读(711) 评论(0) 推荐(0) 编辑