2018年7月20日
Spark Streaming 读取 Kafka 数据的两种方式
摘要： receiver: 使用kafka的高级api consumerAPI，自动更新offset到zookeeper; 在executor上会有receiver从kafka接收数据并存储在Spark executor中，在到了batch时间后触发job去处理接收到的数据，1个receiver占用1个co 阅读全文
posted @ 2018-07-20 09:12 volibearGeek 阅读(2914) 评论(0) 推荐(0) 编辑