20240110打卡——实验 4:RDD 编程初级实践
做了什么:编写 RDD 相关代码(创建 RDD、转换操作 map、filter、reduceByKey)。
学到什么:理解 RDD 的惰性计算、窄依赖与宽依赖。
遇到的问题:RDD collect() 时数据过大导致 OOM,调试时 log 过多导致信息混乱。
本文作者:丰川扬子
本文链接:https://www.cnblogs.com/newzeon/p/18664062
版权声明:本作品采用知识共享署名-非商业性使用-禁止演绎 2.5 中国大陆许可协议进行许可。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步