linux三剑客之sed深度实践
参数:
-a:追加文本到指定行后
-i:插入文本到指定行前
1、单行增加
[root@redhat~]# sed ' 2a 6,f ' linux.tet
1,a
2,b
6,f
3,c
4,d
5,e
[root@redhat~]# sed ' 2i 6,f ' linux.tet
1,a
6,f
2,b
3,c
4,d
5,e
2、多行增加
[root@redhat~]# sed ' 2a 6,f\n7,g ' linux.tet
1,a
2,b
6,f #-->第一种写法
7,g
3,c
4,d
5,e
[root@redhat~]# sed ' 2a 6,f \
> 7,g ' linux.tet
1,a
2,b
6,f #第二种写法
7,g
3,c
4,d
5,e
#-->sed命令i的使用方法是一样的,因此不再列出。
企业案例:优化SSH配置(一键完成增加若干参数)
系统优化时,有一个优化点:更改ssh服务远程登录的配置。主要的操作是在ssh的配置文件加入下面5行文本。
1.Port 52113
2.PermitRootlogin no
3.PermitEmptyPasswords no
4.UseDNS no
5.GssAPIAuthentication no
我们可以使用vi命令编辑这个文本,但这样就比较麻烦,现在想一条命令增加5行文本到第13行前?
指定执行的地址范围
1.sed软件可以对单行或多行进行处理。如果在sed命令前面不指定地址范围,那么默认会匹配所有行
2.用法,n1[,n2]{sed-commands}
3.地址用逗号分隔的,n1,n2可以用数字、正则表达式、或二者的组合表示
4.例子:
1)10{sed-commands} 对第10行操作
2)10,20{sed-commands} 对第10到20行操作,包括第10,20行
3)10,+20{sed-commands} 对第10到30(10+20)行操作,包括第10,30行
4)1~2{sed-commands} 对第1,3,5,7......行操作
5)10, ${sed-commands} 对第10到最后一行($代表最后一行)操作,包括第10行
6)/redhat/{sed-commands} 对匹配redhat的行操作
7)/redhat/,/linux/{sed-commands} 对匹配redhat的行到匹配linux的行操作
8)/redhat/,${sed-commands} 对匹配redhat的行到最后一行操作
9)/redhat/,10{sed-commands} 对匹配redhat的行到第10行操作,注意,如果前10行没有匹配到redhat,sed软件会显示10行以后的匹配redhat的行,如果有
10)1,/redhat/{sed-commands} 对第1行到匹配redhat行的操作
11)/redhat/ ,+2{sed-commands} 对匹配redhat的行到其后的2行操作
3、删
d:删除指定的行
[root@redhat~]# sed ' d ' linux.tet #-->删除所有
[root@redhat~]# sed ' 2d ' linux.tet
1,a
3,c
4,d
5,e
[root@redhat~]# sed ' 2,5d ' linux.tet
1,a
[root@redhat~]# sed ' 1~2d ' linux.tet
2,b
4,d
[root@redhat~]# sed ' 1,+2d ' linux.tet
4,d
5,e
[root@redhat~]# sed ' /redhat/d ' linux.tet #-->删除包含“wuyang”的行
1,wuyang,a
4、改
1)按行替换
c:用新行取代旧行
[root@redhat~]# sed ' 2c 6,f ' linux.tet
1,a
6,f
3,c
4,d
5,e
2)文本替换
s:单独使用-->将每一行中第一处匹配的字符串进行替换==>sed命令
g:每一行进行全部替换==>sed命令s的替换标志之一,非sed命令
-i:修改文件内容==>sed软件的选项
sed软件替换模型(a被替换成b)
sed -i ' s/a/b/g ' redhat.log
sed -i ' s#a#b#g ' redhat.log
观察特点
1.两边是引号,引号里面的两边分别为s和g,中间是三个一样的字符/或#作为定界符。#能在替换内容包含/有助于区别。定界符可以是任意符号如 : 或 | 等,但当替换内容包含定界符时,需要转义即:|。经过长期实践,建议大家使用#作为定界符。
2.定界符/或#,第一个和第二个之间的就是被替换的内容,第二个和第三个之间的就是替换后的内容。
3.s#a#b#g,a能用正则表达式,但b不能用,必须是具体的。
4.默认sed软件是对模式空间(内存中的数据)操作,而-i选项会更改磁盘上的文件内容。
企业案例:指定行修改配置文件
指定行精确修改配置文件,这样可以防止修改所多了地方。
[root@redhat~]# sed ' 3s#3#9# ' linux.tet
1,a
2,b
9,c
4,d
5,e
3)变量替换
[root@redhat~]# cat test.txt #-->创建一个文本
a
b
a
[root@redhat~]# x=a
[root@redhat~]# y=b
[root@redhat~]# echo $x $y
a b
[root@redhat~]# sed s#$x#$y#g test.txt
b
b
b
[root@redhat~]# sed 's#$x#$y#g' test.txt
a
b
a
[root@redhat~]# sed "s#$x#$y#g" test.txt
b
b
b
4)分组替换\( \)和\1的使用说明
sed软件的\( \)的功能可以记住正则表达式的一部分,其中,\1为第一个记住的模式即第一个小括号中的匹配内容,\2第二记住的模式,即第二个小括号中的匹配内容,sed最多可以记住9个。
例:echo I am student.如果想保留这一行的单词student,删除剩下的部分,使用圆括号标记想保留的部分。
[root@redhat~]# echo I am student. | sed ' s#^.*am \([a-z].*\) stu.*$#\1#g '
student
[root@redhat~]# echo I am student. | sed -r ' s#^.*am ([a-z].*) stu.*$#\1#g '
student
1. ^.*am-->这句的意思是以任意字符开头到am 为止,匹配文件中的I am 字符串
2. \([a-z].*\)-->这句的外壳就是括号\( \),里面的[a-z]表示匹配26个字母的任何一个,[a-z].*合起来就是匹配任意多个字符,本题来说就是匹配student字符串,由于student字符串是需要保留的,因此用括号括起来匹配,后面通过\1来取student字符串
3. stu.*$-->表示以空格tea起始,任意字符结尾,实际就是匹配student字符串后,紧接着的字符串student
4.后面被替换的内容中的\1就是取前面的括号里的内容了,也就是我们要的student字符串
5、()是扩展正则表达式的元字符,sed软件默认识别基本正则表达式,想要使用扩展正则需要使用\转义,即\( \)。sed使用-r选项则可以识别扩展正则表达式,此时使用\( \)反而会出错
企业案例:系统开机启动项优化
[root@redhat~]# chkconfig --list | grep "3:on" | grep -vE "sshd | crond | network | rsyslog | sysstat" | awk ' {print $1} ' | sed -r ' s#^(.*)#chkconfig \1 off#g ' | bash
[root@redhat~]# chkconfig --list | grep "3:on"
5)特殊符号&代表被替换的内容
[root@redhat~]# sed '1,3s#c#--&--#g' redhat.txt #-->此处&等于c
1,a,--c--eo
2,b,--c--to
3,c,--c--oo
4,d,cfo
5,e,cio
企业案例:批量重命名文件
当前目录下有文件如下所示:
[root@redhat~]# ls
stu_10_1_a.jpg stu_10_2_a.jpg stu_10_3_a.jpg stu_10_4_a.jpg stu_10_5_a.jpg
要求用sed命令重命名,效果为stu_10_1_a.jpg==>stu_10_1.jpg,即删除文件名的_a
[root@redhat~]# ls *.jpg | sed -r 's#(^.*)_a.*#mv & \1.jpg#g' | bash
5、查
p:输出指定内容,但默认会输出2次匹配的结果,因此使用n取消默认输出
1)按行查询
[root@redhat~]# sed ' 2p ' linux.txt
1,a
2,b
2,b
3,c
4,d
5,e
[root@redhat~]# sed -n ' 2p ' linux.txt
2,b
[root@redhat~]# sed -n ' 2,3p ' linux.txt
2,b
3,c
说明:取行就用sed,最简单
[root@redhat~]# sed -n ' 1~2p ' linux.txt
1,a
3,c
5,e
[root@redhat~]# sed -n ' p ' linux.txt
1,a
2,b
3,c
4,d
5,e
2)按字符串查询
[root@redhat~]# sed -n ' /cto/p ' linux.txt
2,b,cto
[root@redhat~]# sed -n ' /cto/,/cfo/p ' linux.txt
2,b,cto
3,c,coo
4,d,cfo
3)混合查询
[root@redhat~]# sed -n ' 2,/cfo/p ' linux.txt
2,b,cto
3,c,coo
4,d,cfo
[root@redhat~]# sed -n ' /e/,2p ' linux.txt
5,e,cio
#-->特殊情况,前两行没有匹配到e,就向后匹配,如果匹配到e就打印此行