2018年7月20日
[Spark]-源码解析-RDD之transform
摘要： 1.Map系转换 Map转换算是 RDD 的经典转换操作之一了.就以它开头.Map的源码如下 1.1 sc.clean(f) 第一眼看见的就是一个 clean 函数.这是做什么的.来看看定义 说的非常清楚.clean 整理一个闭包，使其可以序列化并发送到任务.这里想明白.为什么会序列化闭包传送到任务 阅读全文
posted @ 2018-07-20 17:32 NightPxy 阅读(703) 评论(0) 推荐(1) 编辑