2019年3月22日
Spark2.2 saveAsTable 函数使用 overWrite 设置 Partition 会造成全覆盖的问题
摘要： 在使用 CDH 6.0.X 的版本还是自带的是 Spark2.2 的版本，2.2 版本的 Spark 使用 saveAsTable 如果使用overWrite PartitionBy 的功能会有和 hive 行为不一致的地方。 比如我们目前有两个分区 2019-03-22 和 2019-03-23 阅读全文
posted @ 2019-03-22 14:28 piperck 阅读(6369) 评论(0) 推荐(0) 编辑