摘要: 1.动态资源分配 Spark的动态资源分配就是executor数据量的动态增减,具体的增加和删除数量根据业务的实际需要动态的调整。具体表现为:如果executor数据量不够,则增加数量,如果executor在一段时间内空闲,则移除这个executor。 动态增加executor配置项:spark.d 阅读全文
posted @ 2023-05-09 10:59 贾彤 阅读(224) 评论(0) 推荐(0) 编辑