|NO.Z.00014|——————————|BigDataEnd|——|Hadoop&Spark.V02|——|Spark.v02|sparkcore|RDD编程&RDD编程模型|

一、RDD编程模型
### --- RDD编程模型

~~~     RDD表示数据对象
~~~     通过对象上的方法调用来对RDD进行转换
~~~     最终显示结果 或 将结果输出到外部数据源
~~~     RDD转换算子称为Transformation是Lazy的(延迟执行)
~~~     只有遇到Action算子,才会执行RDD的转换操作
### --- 要使用Spark,需要编写 Driver 程序,它被提交到集群运行

~~~     Driver中定义了一个或多个 RDD ,并调用 RDD 上的各种算子
~~~     Worker则执行RDD分区计算任务

 
 
 
 
 
 
 
 
 

Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of life.It sinks, and I am ready to depart
                                                                                                                                                   ——W.S.Landor

 

 

posted on   yanqi_vip  阅读(20)  评论(0编辑  收藏  举报

相关博文:
阅读排行:
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
· 别再用vector<bool>了!Google高级工程师:这可能是STL最大的设计失误
· 单元测试从入门到精通
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

导航

统计

点击右上角即可分享
微信分享提示