2021年3月13日
StructuredStreaming整合Kafka
摘要： 实时ETL 准备： 每台节点启动zookeeper集群 cd /usr/local/zookeeper/bin/ ./zkServer.sh start master上启动kafka： cd /usr/local/kafka_2.12-2.7.0/bin kafka-server-start.sh 阅读全文
posted @ 2021-03-13 20:26 ziyuliu 阅读(621) 评论(0) 推荐(0) 编辑
StructuredStreaming-Sink
摘要： Output Modes输出模式 package cn.itcast.structured import org.apache.spark.SparkContext import org.apache.spark.sql.{DataFrame, Dataset, Row, SparkSession} 阅读全文
posted @ 2021-03-13 16:30 ziyuliu 阅读(142) 评论(0) 推荐(0) 编辑