关注公众号数据社，获取大数据、数据分析资料

数据社

专注大数据、数据分析、MPP数据库技术分析

2020年10月19日
Spark如何进行动态资源分配
摘要： 一、操作场景 对于Spark应用来说，资源是影响Spark应用执行效率的一个重要因素。当一个长期运行的服务，若分配给它多个Executor，可是却没有任何任务分配给它，而此时有其他的应用却资源紧张，这就造成了很大的资源浪费和资源不合理的调度。 动态资源调度就是为了解决这种场景，根据当前应用任务的负载 阅读全文
posted @ 2020-10-19 13:21 WindyQin 阅读(2144) 评论(0) 推荐(2) 编辑
点击右上角即可分享
微信分享提示