2022年3月10日
spark 程序的执行架构、spark on yarn 中 client 模式和 cluster 模式提交任务(资源调度)的区别、宽依赖和窄依赖、spark 程序的结构、spark资源调度及任务调度原理图
摘要： spark 程序的执行架构 任意的 spark 代码都可以分成两个部分 算子里面 和 算子外面 算子里面 -- task -- 在Executor中执行 算子外面 -- 在Driver中执行 spark on yarn 中 client 模式和 cluster 模式提交任务(资源调度)的区别 Spa 阅读全文
posted @ 2022-03-10 22:31 赤兔胭脂小吕布 阅读(72) 评论(0) 推荐(0) 编辑