笔记·文件查找和压缩
locate:非实时查找(数据库查找)
locate [OPTION]... [PATTERN]...
-i 不区分大小写的搜索
-n N 只列举前N个匹配项目
-r 使用基本正则表达式
范例:
#locate conf #搜索名称或路径中包含“conf”的文件
#locate -r '\.conf$' #使用Regex来搜索以“.conf”结尾的文件
find:实时查找
find [OPTION]... [查找路径] [查找条件] [处理动作]
根据搜索目录层级查找:
-maxdepth level 最大搜索目录深度,指定目录下的文件为第1级
-mindepth level 最小搜索目录深度
-depth 对每个目录先处理目录内的文件,再处理目录本身
根据文件名和inode查找:
-name "文件名称" #支持使用glob,如:*, ?, [], [^],通配符要加双引号引起来
-iname "文件名称" #不区分字母大小写
-inum n #按inode号查找
-samefile name #相同inode号的文件
-links n #链接数为n的文件
-regex “PATTERN” #以PATTERN匹配整个文件路径,而非文件名称
范例:
#find -regex ".*\.txt$"
#find /var –name "log*"
根据属主、属组查找:
-user USERNAME #查找属主为指定用户(UID)的文件
-group GRPNAME #查找属组为指定组(GID)的文件
-uid UserID #查找属主为指定的UID号的文件
-gid GroupID #查找属组为指定的GID号的文件
-nouser #查找没有属主的文件
-nogroup #查找没有属组的文件
根据文件类型查找:
-type TYPE
TYPE可以是以下形式:
f: 普通文件
d: 目录文件
l: 符号链接文件
s:套接字文件
b: 块设备文件
c: 字符设备文件
p: 管道文件
范例:
#find /home –type d -ls
空文件或目录:
-empty
#find /app -type d -empty
组合条件:
与:-a ,默认多个条件是与关系
或:-o
非:-not !
范例:
#find /etc/ -type d -o -type l |wc -l
#find /etc/ -type d -o -type l -ls |wc -l
#find /etc/ \( -type d -o -type l \) -ls |wc -l
!A -a !B = !(A -o B)
!A -o !B = !(A -a B)
范例:
#find -user joe -group joe
#find -user joe -not -group joe
#find -user joe -o -user jane
#find -not \( -user joe -o -user jane \)
#find / -user joe -o -uid 500
#find ! -type d -o ! -empty |wc -l
#find ! \( -type d -a -empty \)| wc -l
#find /tmp \( -not -user root -a -not -name 'f*' \) -ls #找出/tmp目录下,属主不是root,且文件名不以f开头的文件
#find /tmp -not \( -user root -o -name 'f*' \) –ls
排除目录:
#查找/etc/下,除/etc/security目录的其它所有.conf后缀的文件
find /etc -path '/etc/security' -a -prune -o -name "*.conf"
#查找/etc/下,除/etc/security和/etc/systemd,/etc/dbus-1三个目录的所有.conf后缀的文件
find /etc \( -path "/etc/security" -o -path "/etc/systemd" -o -path "/etc/dbus-1" \) -a -prune -o -name "*.conf"
#排除/proc和/sys目录
find / \( -path "/sys" -o -path "/proc" \) -a -prune -o -type f -a -mmin -1
根据文件大小来查找:
-size [+|-]#UNIT #常用单位:k, M, G,c(byte),注意大小写敏感
#UNIT: #表示(#-1, #],如:6k 表示(5k,6k]
-#UNIT #表示[0,#-1],如:-6k 表示[0,5k]
+#UNIT #表示(#,∞),如:+6k 表示(6k,∞)
范例:
#find / -size +10G
根据时间戳:
#以“天”为单位
-atime [+|-]#
# #表示[#,#+1)
+# #表示[#+1,∞]
-# #表示[0,#)
-mtime
-ctime
#以“分钟”为单位
-amin
-mmin
-cmin
根据权限查找:
-perm [/|-]MODE
MODE #精确权限匹配
/MODE #任何一类(u,g,o)对象的权限中只要能一位匹配即可,或关系,+ 从CentOS 7开始淘汰
-MODE #每一类对象都必须同时拥有指定权限,与关系
0 表示不关注
说明:
find -perm 755 会匹配权限模式恰好是755的文件
只要当任意人有写权限时,find -perm /222就会匹配
只有当每个人都有写权限时,find -perm -222才会匹配
只有当其它人(other)有写权限时,find -perm -002才会匹配
正则表达式:
#find /you/find/dir -regextype posix-extended -regex "regex"
处理动作:
-print:默认的处理动作,显示至屏幕
-ls:类似于对查找到的文件执行"ls -dils"命令格式输出
-fls file:查找到的所有文件的长格式信息保存至指定文件中,相当于 -ls > file
-delete:删除查找到的文件,慎用!
-ok COMMAND {} \; 对查找到的每个文件执行由COMMAND指定的命令,对于每个文件执行命令之前,都会交互式要求用户确认
-exec COMMAND {} \; 对查找到的每个文件执行由COMMAND指定的命令
{}: 用于引用查找到的文件名称自身
范例:
#find -name ".conf" -exec cp {} {}.orig \; #备份配置文件,添加.orig这个扩展名
#find /tmp -ctime +3 -user joe -ok rm {} \; #提示删除存在时间超过3天以上的joe的临时文件
#find ~ -perm -002 -exec chmod o-w {} \; #在主目录中寻找可被其它用户写入的文件
#find /data –type f -perm 644 -name "*.sh" –exec chmod 755 {} \; #查找/data下的权限为644,后缀为sh的普通文件,增加执行权限
xargs:参数替换
find | xargs COMMAND
范例:
#seq 10 | xargs #显示10个数字
#ls | xargs rm #删除当前目录下的大量文件
#find -name "*.sh" | xargs ls -Sl
#echo {1..10} |xargs
#echo {1..10} |xargs -n1
#echo {1..10} |xargs -n2
#批量创建和删除用户
#echo user{1..10} |xargs -n1 useradd
#echo user{1..100} | xargs -n1 userdel -r
#这个命令是错误的
#find /sbin/ -perm /700 | ls -l
#find /bin/ -perm /7000 | xargs ls -Sl #查找有特殊权限的文件,并排序
#find /bin/ -perm -7000 | xargs ls -Sl #此命令和上面有何区别?
#find -type f -name "*.txt” -print0 | xargs -0 rm #以字符nul分隔
#seq 100 |xargs -i -P10 wget -P /data http://10.0.0.8/{}.html #并发执行多个进程
#并行下载bilibili视频
yum install python3-pip -y
pip3 install you-get
seq 10 | xargs -i -P3 you-get https://www.bilibili.com/video/BV1HZ4y1p7Bf?p={}
gzip和gunzip
gzip [OPTION]... FILE ...
-k keep, 保留原文件,CentOS 8 新特性
-d 解压缩,相当于gunzip
-c 结果输出至标准输出,保留原文件不改变
-# 指定压缩比,#取值为1-9,值越大压缩比越大
范例:
#gunzip file.gz #解压缩
#zcat file.gz #不显式解压缩的前提下查看文本文件内容
#gzip -c messages >messages.gz
#gzip -c -d messages.gz > messages
#zcat messages.gz > messages
#cat messages | gzip > m.gz
bzip2和bunzip2
bzip2 [OPTION]... FILE ...
-k keep, 保留原文件
-d 解压缩
-c 结果输出至标准输出,保留原文件不改变
-# 1-9,压缩比,默认为9
范例:
#bunzip2 file.bz2 解压缩
#bzcat file.bz2 不显式解压缩的前提下查看文本文件内容
xz和unxz
xz [OPTION]... FILE ...
-k keep, 保留原文件
-d 解压缩
-c 结果输出至标准输出,保留原文件不改变
-# 压缩比,取值1-9,默认为6
范例:
#unxz file.xz #解压缩
#xzcat file.xz #不显式解压缩的前提下查看文本文件内容
zip和unzip
范例:
#zip -r /backup/sysconfig.zip /etc/sysconfig/ #打包并压缩
#cd /etc/sysconfig; zip -r /root/sysconfig.zip * #不包括目录本身,只打包目录内的文件和子目录
#unzip /backup/sysconfig.zip #默认解压缩至当前目录
#unzip /backup/sysconfig.zip -d /tmp/config #解压缩至指定目录,如果指定目录不存在,会在其父目录(必须事先存在)下自动生成
#cat /var/log/messages | zip messages -
#unzip -p message.zip > message #-p 表示管道
tar
创建归档,保留权限:
#tar -cpvf /PATH/FILE.tar FILE...
追加文件至归档: 注:不支持对压缩文件追加:
#tar -rf /PATH/FILE.tar FILE...
查看归档文件中的文件列表:
tar -t -f /PATH/FILE.tar
展开归档:
#tar xf /PATH/FILE.tar
#tar xf /PATH/FILE.tar -C /PATH/
结合压缩工具实现:归档并压缩:
-z 相当于gzip压缩工具
-j 相当于bzip2压缩工具
-J 相当于xz压缩工具
范例:
#tar zcvf etc.tar.gz /etc/
#tar jcvf etc.tar.bz2 /etc/
#tar Jcvf etc.tar.xz /etc/
#只打包目录内的文件,不所括目录本身
#tar zcvf /root/etc.tar.gz ./
#利用 tar 进行文件复制
#tar c /data/ | tar x -C /backup
--exclude 排除文件
#tar zcvf /root/a.tgz --exclude=/app/host1 --exclude=/app/host2 /app
-T 选项指定输入文件
-X 选项指定包含要排除的文件列表
#tar zcvf mybackup.tgz -T /root/includefilelist -X /root/excludefilelist
split:分割一个文件为多个文件
#split -b Size –d tar-file-name prefix-name #分割大的 tar 文件为多份小文件
#split -b 1M mybackup.tgz mybackup-parts
#split -b 1M –d mybackup.tgz mybackup-parts #切换成的多个小分文件使用数字后缀
#cat mybackup-parts* > mybackup.tar.gz #将多个切割的小文件合并成一个大文件