08 2021 档案
摘要：使用idea编写spark程序，想要查看源代码，点进去是compiled code ``` private[sql] def this(sc : org.apache.spark.SparkContext) = { /* compiled code */ } def version : scala.
阅读全文
摘要：structed streaming的执行批次，较spark streaming有所改变。更加灵活。总结下来，可大白话地分为三类: 1尽可能快的执行，不定时间 2按固定间隔时间执行 3仅执行一次 详情如下： Trigger类型 使用 注意 unspecified (default) as soon
阅读全文
