20240112打卡——实验 6:Spark Streaming 编程初级实践
做了什么:搭建 Spark Streaming 任务,处理 Kafka 数据流。
学到什么:掌握 DStream,理解窗口操作、checkpoint 机制。
遇到的问题:Kafka 连接 Spark 时 offset 处理问题,数据积压导致延迟。
本文作者:丰川扬子
本文链接:https://www.cnblogs.com/newzeon/p/18667049
版权声明:本作品采用知识共享署名-非商业性使用-禁止演绎 2.5 中国大陆许可协议进行许可。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步