2020年9月17日
spark textfile rdd 日记
摘要： 批量处理模板方法, 核心处理方法为内部方法 def batchProces(sc: SparkContext, locationFlag: Int, minid: Int, maxid: Int, numPartitions: Int) = { //自定义RDD,此处为demo val dataRD 阅读全文
posted @ 2020-09-17 16:50 龘人上天 阅读(284) 评论(0) 推荐(1) 编辑