2018年11月9日
Spark调优_性能调优(一)
摘要： 总结一下spark的调优方案--性能调优： 一、调节并行度 1、性能上的调优主要注重一下几点： Excutor的数量 每个Excutor所分配的CPU的数量 每个Excutor所能分配的内存量 Driver端分配的内存数量 2、如何分配资源 在生产环境中，提交spark作业的时候，使用的是spark 阅读全文
posted @ 2018-11-09 20:22 董秀才 阅读(1242) 评论(0) 推荐(0) 编辑