摘要: 1.sample算子 sample随机抽样算子,根据传进去的小数按比例进行有放回或者无放回的抽样,虽然参数中有比例,但是不保证按比例进行抽样 2.控制算子checkpoint 阅读全文
posted @ 2022-04-09 22:06 jsqup 阅读(28) 评论(0) 推荐(0) 编辑
摘要: import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} object WordCount extends App { private val conf = new SparkConf() co 阅读全文
posted @ 2022-04-09 21:15 jsqup 阅读(22) 评论(0) 推荐(0) 编辑