Linux复制文件夹时排除某些文件或文件夹

copy时排除某些文件或文件夹

资料来源:https://www.jianshu.com/p/bf9eba9f4e97

在/home/admin/Dong下创建如下测试目录和文件:

mkdir folder{1..4}  # 一次性创建4个文件夹,目录名为folder1, folder2, folder3,folder4
mkdir logs
mkdir data
mkdir datafile

touch folder1/test{1..5}  # 每个目录创建5个空文件
touch folder2/test{1..5}
touch folder3/test{1..5}
touch folder4/test{1..5}
touch logs/log{1..5}
touch data/data{1..5}
touch datafile/datafile{1..5}

要求:复制/home/admin/Dong路径下除了logs目录和data目录的所有文件夹及文件到/home/admin/Bing路径下。

1.find + cpio

命令如下:

find x1 | grep -v x2 | cpio -pdm x3  # x1:源路径,x2:排除的文件/目录,x3:目标路径

命令解释:

  • find: 查找源路径下的所有文件

  • cpio: 做文件归档处理

  • -pdm

    • -p: Copy-pass 模式,即将文件/目录拷贝到另一个位置
    • -d: 根据需要创建前导目录
    • -m: 创建文件时保留以前的文件修改时间

示例:

find /home/admin/Dong | grep -vE "/logs/|/data/" | cpio -pdm /home/admin/Bing  # 加了-E表示正则匹配,-v表示排除
find /home/admin/Dong | grep -vE "/logs|/data" | cpio -pdm /home/admin/Bing  --不推介

推介上面的写法,上面的写法会复制logs和data目录,但不会复制目录下的文件,只是空目录而已;

而下面的写法会误把/datafile也排除在外,不符合要求。

2.ls + xargs

命令如下:

ls x1/ | grep -v x2 | xargs -i cp -r x1/{} x3/    # x1:源路径,x2:排除的文件/目录,x3:目标路径

命令解释:

  • ls x1/ : 将x1目录下的文件/目录全部列出来(不包含隐藏的,否则要加 -a)
  • | : 管道,将前面命令输出的内容作为输入参数传给后面的命令
  • grep -v x2 : 排除x1目录下的x2文件/目录 (-v的作用是排除)
  • xargs -i : xargs实现将管道传递过来的stdin进行处理然后传递到命令的参数位置上
  • -i: 如果不使用-i,则默认是将分割处理后的结果整体传递到 命令的最尾部; 但是有时候需要传递到多个位置,不使用-i就不知道传递到哪个位置了
  • 使用xargs -i时以大括号{}作为替换符号,传递的时候看到{}就将结果替换,可以将{}放在任意需要传递的参数位置上。如果多个地方使用{}就实现了多个传递

示例:

ls /home/admin/Dong/ | grep -v -E "logs|data" | xargs -i cp -r /home/admin/Dong/{} /home/admin/Bing/

3. rsync

rsync是远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件。
rsync使用所谓的“rsync算法”来使本地和远程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快。

详情可见:https://my.oschina.net/ccLlinux/blog/1859116

rsync同步常用命令:

rsync -av source_dir dest_dir
  • -a : 包含-rtplgoD
  • -r : 同步目录时要加上,类似cp时的-r选项
  • -v : 同步时显示一些信息,让我们知道同步的过程
  • -P : 显示同步过程,比如速率,比-v更加详细
  • -l : 保留软连接
  • -L : 加上该选项后,同步软链接时会把源文件给同步
  • -p : 保持文件的权限属性
  • -o : 保持文件的属主
  • -g : 保持文件的属组
  • -D : 保持设备文件信息
  • -t : 保持文件的时间属性
  • --delete : 删除DEST中SRC没有的文件
  • --exclude : 过滤指定文件,如--exclude “logs”会把文件名包含logs的文件或者目录过滤掉,不同步
  • -u : 加上该选项后,如果DEST中的文件比SRC新,则不同步
  • -z : 传输时压缩

排除文件/目录
排除单个文件/目录

rsync -avP --exclude=del_file source_dir dest_dir

排除多个文件/目录

rsync -avP --exclude={del_file1, del_file2, ...} source_dir dest_dir

示例:

rsync -avP --exclude={data,logs} /home/admin/Dong /home/admin/Bing
posted @ 2021-12-16 16:48  向日葵的跋涉  阅读(5104)  评论(0编辑  收藏  举报