08 2021 档案

摘要:使用idea编写spark程序,想要查看源代码,点进去是compiled code ``` private[sql] def this(sc : org.apache.spark.SparkContext) = { /* compiled code */ } def version : scala. 阅读全文
posted @ 2021-08-31 11:52 是奉壹呀 阅读(1084) 评论(0) 推荐(1)
摘要:structed streaming的执行批次,较spark streaming有所改变。更加灵活。总结下来,可大白话地分为三类: 1尽可能快的执行,不定时间 2按固定间隔时间执行 3仅执行一次 详情如下: Trigger类型 使用 注意 unspecified (default) as soon 阅读全文
posted @ 2021-08-30 15:24 是奉壹呀 阅读(958) 评论(0) 推荐(0)