摘要: Sprak参数有两种设置方式,一种是在代码中直接设置,一种是在提交任务时设置。代码中的优先级高于提交任务。 1、num-executors 参数说明:该参数用于设置Spark作业总共要用多少个Executor进程来执行。Driver在向YARN集群管理器申请资源时,YARN集群管理器会尽可能按照你的 阅读全文
posted @ 2019-04-19 14:18 Solong1989 阅读(1072) 评论(0) 推荐(0) 编辑