【Spark】spark.sql.sources.partitionOverwriteMode

参考:(80条消息) spark优化之分区插入_大怀特的博客-CSDN博客_spark插入

 

// 覆盖指定分区
table("tv_group").write.option("partitionOverwriteMode", "dynamic").partitionBy("store_id", "group_id").
mode(SaveMode.Overwrite).save("xxx")

// 删除所有分区再插入
table("tv_group").write.option("partitionOverwriteMode", "STATIC").partitionBy("store_id", "group_id").
mode(SaveMode.Overwrite).save("xx")

posted @ 2022-07-07 18:28  梦醒江南·Infinite  阅读(610)  评论(0编辑  收藏  举报