2019年8月5日
Spark的数据本地化级别及调优操作
摘要： 1. 数据本地化的级别： ① PROCESS_LOCAL task要计算的数据在本进程（Executor）的内存中。 ② NODE_LOCAL a) task所计算的数据在本节点所在的磁盘上。 b) task所计算的数据在本节点其他Executor进程的内存中。 ③ NO_PREF task所计算的 阅读全文
posted @ 2019-08-05 09:51 HandsomeEric 阅读(1644) 评论(0) 推荐(0) 编辑