2019年4月19日
Spark 参数说明
摘要： Sprak参数有两种设置方式，一种是在代码中直接设置，一种是在提交任务时设置。代码中的优先级高于提交任务。 1、num-executors 参数说明：该参数用于设置Spark作业总共要用多少个Executor进程来执行。Driver在向YARN集群管理器申请资源时，YARN集群管理器会尽可能按照你的 阅读全文
posted @ 2019-04-19 14:18 Solong1989 阅读(1037) 评论(0) 推荐(0) 编辑