会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Solong1989
博客园
首页
新随笔
联系
订阅
管理
2019年4月19日
Spark 参数说明
摘要: Sprak参数有两种设置方式,一种是在代码中直接设置,一种是在提交任务时设置。代码中的优先级高于提交任务。 1、num-executors 参数说明:该参数用于设置Spark作业总共要用多少个Executor进程来执行。Driver在向YARN集群管理器申请资源时,YARN集群管理器会尽可能按照你的
阅读全文
posted @ 2019-04-19 14:18 Solong1989
阅读(1073)
评论(0)
推荐(0)
编辑
公告