hive 如何对重点目录进行保护

1、防止误删除数据

在hive里面经常执行insert overwrite语句,通常来说,没有执行完的话,默认不会覆盖目标表的数据。但是如果执行完了,目标表的数据就会被清理掉。
那么如何保护这些数据目录没有被清理掉,而是被移动到Hadoop的回收站里面了呢?
这里需要使用到hive的如下参数

hive.local.dir.confblacklist

这个参数默认没有在hive-default.xml文件当中,估计是在代码里面
该配置项已对“/opt/”,“/user/hive/warehouse”等目录进行了默认配置。

通过测试,对于truncate table table_name 数据也被放在了回收站

借鉴:
https://support.huaweicloud.com/topic/150982-1-H

posted @   北漂-boy  阅读(137)  评论(0编辑  收藏  举报
编辑推荐:
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
阅读排行:
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 提示词工程——AI应用必不可少的技术
· Open-Sora 2.0 重磅开源!
· 字符编码:从基础到乱码解决
点击右上角即可分享
微信分享提示