hdfs distcp 快照同步

生成快照目录
hadoop dfsadmin -allowSnapshot hdfs_dir
创建快照
hadoop dfs -createSnapshot hdfs_dir snapshot_name
source_hdfs与target_hdfs 都要建快照
对比两端快照后将源端同步给目的端
hadoop distcp -Ddfs.client.use.datanode.hostname=true -Ddfs.replication=1 -update -diff <source_hdfs_dir> <target_hdfs_dir>
重命名快照
hadoop dfs -renameSnapshot <hdfs_path> < newName>
删除快照
hadoop dfs -deleteSnapshot <hdfs_path> <snap_name>

posted @   蛇啊蛇啊  阅读(87)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· 开源Multi-agent AI智能体框架aevatar.ai,欢迎大家贡献代码
· Manus重磅发布:全球首款通用AI代理技术深度解析与实战指南
· 被坑几百块钱后,我竟然真的恢复了删除的微信聊天记录!
· AI技术革命,工作效率10个最佳AI工具
点击右上角即可分享
微信分享提示