linux 常用处理命令
zcat,bzcat
查看压缩文件中的内容并检索关键字
- zcat txt.tar.gz | grep -a 'html'
- bzcat txt.tar.bz2 | grep -a 'html'
grep -a --text #不要忽略二进制的数据。
sed -i 直接替换文件内容
sed -i 's#wwwcdn.xxx.net/k/??kissy#kissy.xxx/k/??kissy#' ./beauty_awards.html
加上xargs
find . -name 'onepage.html' | xargs sed -i 's#wwwcdn.xxx.net/k/??kissy#kissy.xxx.net/k/??kissy#'
sed -i 匹配直接删除行
sed -i '/002\/90\/71\/95_avatar_middle.jpg/d' /tmp/avatar_upload.txt
使用grep比较两个文件,a,b 仅仅出现在b文件中的行
grep -v -f a b (有时会出现正则匹配错误)
awk 比较两个文件, 只在a中出现的行
awk '{print NR, $0}' /tmp/a.txt /tmp/b.txt | sort -k2 | uniq -u -f 1 | sort -k1 | awk '$1<3 {printf $2"\n"}'
【$1<3】 中的3 是/tmp/a.txt 文件的行数+1
awk就是文本的解释器和过滤器。awk把每一行看成是一个记录(record),每个记录使用分隔符(默认是空格)把每条记录分成若干域。awk内置参 数$0表示整行,$1、$2...分别表示各域,内置参数NR,表示记录的计数,awk '{print NR, $0}' file1 file2表示依次读取file1 file2,打印出每行,并且在前面添加行号。
命令sort,就是对行进行排序,参数-k表示根据各行的第几个参数关键字开进行排序,这里的-k2表示根据第二个关键字开始进行排序。
命令uniq,进行报告或者忽略重复的行,参数-u,表示只是打印出唯一的行(unique lines),-f表示忽略的每行的前n个域的比较。
awk 关系运算符
cat user.txt | grep -v ID | awk '$4 > 18 {printf $2 "\n"}'
用shell切分文件--split
https://blog.csdn.net/qmhball/article/details/7917033
split [-bl] file [prefix]
参数说明:
-b, --bytes=SIZE:对file进行切分,每个小文件大小为SIZE。可以指定单位b,k,m。
-l, --lines=NUMBER:对file进行切分,每个文件有NUMBER行。
prefix:分割后产生的文件名前缀。
split -l 10 bing.log common_upload_image_
【shell】【awk】常用命令 使用awk 按行打乱(shuffle)数据文件
原理:
使用随机数功能,与原内容作拼接,排序,然后输出,最终去掉随机数,得到打乱后的内容
cat 1.txt | awk -F"\3" 'BEGIN{srand();}{value=int(rand()*10000000); print value"\3"$0 }' | sort | awk -F"\3" '{print $2}'
Linux查看文件指定行数内容
1、tail date.log 输出文件末尾的内容,默认10行
tail -20 date.log 输出最后20行的内容
tail -n -20 date.log 输出倒数第20行到文件末尾的内容
tail -n +20 date.log 输出第20行到文件末尾的内容
tail -f date.log 实时监控文件内容增加,默认10行。
2、head date.log 输出文件开头的内容,默认10行
head -15 date.log 输出开头15行的内容
head -n +15 date.log 输出开头到第15行的内容
head -n -15 date.log 输出开头到倒数第15行的内容
3、sed -n "开始行,结束行p" 文件名
sed -n '70,75p' date.log 输出第70行到第75行的内容
sed -n '6p;260,400p; ' 文件名 输出第6行 和 260到400行
sed -n 5p 文件名 输出第5行
grep -E 选项可以用来扩展选项为正则表达式。 如果使用了grep 命令的选项-E,则应该使用 | 来分割多个pattern,以此实现OR操作。
grep -E 'pattern1|pattern2' filename
cat /tmp/a.txt | grep -E '3959565|3959557'
cat /tmp/a.txt | grep '3959565\|3959557'
Linux中怎么通过PID号找到对应的进程名及所在目录方法
来源: https://www.jb51.net/article/142461.htm
大致信息: ps -aux |grep -v grep|grep 28990
得知PID之后可以直接进入/proc/28990