SED命令详解
SED常用功能
- 处理文本文件
- 分析日志文件
- 修改配置文件
SED处理流程
文本或管道输入—-读入一行到模式空间(临时缓冲区)—-sed命令处理—–输出到屏幕—-读入一行到模式空间—–循环
SED原则
- sed一次处理一行内容
- sed不改变文件内容(除非重定向或者 -i 参数)
- sed可以对所有行进行操作,也可以根据正则选择选定行
SED的格式
- 命令行格式
sed [options] ‘command’ file
options: -e -n -i
command: 行定位(或正则)+ sed命令(操作) - 脚本格式
sed -f script file
SED命令
-p: –/etc 下的passwd文件
- sed ‘p’ passwd
输出两行同样内容,因为sed本身就是输出到屏幕,然后‘p’命令再一次打印 - sed -n ‘p’ passwd
-n 忽略默认输出// nl passwd 打印文件并带行号
// nl -b a passwd 打印文件并带行号且空行也计算行数
行定位
- sed -n ’10p’ passwd 定位一行
- sed -n ‘/besttest/p’ passwd 使用正则表达式,用//间隔
- sed -n ‘6,10p’ passwd 定位多行
- sed -n ‘/mail/,/besttest/p’ passwd 定位多行正则匹配
- sed -n ’16,/besttest/p’ passwd 定位多行从第16行到匹配行
- sed -n ’10!p’ passwd 不选择这一行
- sed -n ‘6,10!p’ passwd 不选择多行
- sed -n ‘4~3p’ passwd 从第4行开始,每三行打印一次 开始行~步长
基本操作命令
a(新增行)/i(插入行)
c(替代行)
d(删除行)
- sed ’12a======’ passwd 在第12行后增加=======
- sed ’12i======’ passwd 在第12行前增加=======
- sed ‘1,5a=====’ passwd 在1到5行后面全都增加=======
- sed ‘5c======’ passwd 第五行替换成======
- sed ‘2,5c=====’ passwd 把2-5行全替换成======
- sed ‘5d’ passwd 删除第5行
- sed ‘2,5d’ passwd 删除2-5行
练习:profile文件中最后一行添加内容——–$表示最后一行,内容前面如果需要加空格,那么在a后面 加\ 然后在加空格
eg:sed -n ‘$a\ export TOMCAT_HOME=XXXXX\n export PATH=$PATH:$TOMCAT’ profile >> profile
eg:sed -i ‘$a\ export TOMCAT_HOME=XXXXX\n export PATH=$PATH:$TOMCAT’ profile
练习:删除空白行—–^代表开始,$代表结束
eg:sed ‘/^$/d’ passwd
练习:服务器日志处理,log中打印error信息
eg:sed -n ‘/error/p’ file.log
替换操作
s:
- sed ‘s/old/new/’ passwd 替换操作
- sed ‘s/:/$/g’ passwd g 全局替换,否则每行只替换第一个
练习:获取eth0中的ip .*代表所有的
eg:ifconfig | sed -n ‘/inet.*broadcast/p’ | sed ‘s/inet\s\+//’ | sed ‘s/\s\+netmask.*//’
先获取有ip的那行,然后把ip前面替换成空,后面替换成空,空格占位符是\s,+代表一个以上且要转义。
sed高级操作
{}:多个sed命令,用;隔开,然后用{}括起来。
eg:nl -b a passwd | sed ‘{10,20d;s/:/%/g}’
删除10-20行,并且把:替换成%。(不加{}也可以)
eg:nl -b a passwd | sed -n ‘{n;n;p}’
读取下一个输入行
&:替换固定的字符串,代表前面匹配的字符
eg:sed ‘s/^[a-z_-]\+/& /’ passwd
用户名后面统一添加空格
练习:将用户名的首字母转换为大写
\u \l:对首字母转成大写或小写
\U \L:对一串字符转成大写或小写
eg:sed ‘s/^[a-z_-]\+/\u&/’ passwd
eg:ls | sed ‘s/.*/\U&/’
():需要转义\(\),代表替换某部分字符串(\1\2)
eg:sed ‘s/w1\(w2\)\(w3\)/\1\2/’ xxx.txt
练习:获取eth0中的ip
eg:ifconfig | sed -n ‘/inet.*broadcast/p’ | sed ‘s/inet.*\s\+\([0-9\.]\+\)\s\+netmask.*/\1/’
注意:如果取值前面包含空格使用.*不好使,需要\s\+代表空格,否则取不到值。
eg:ifconfig | sed -n ‘/inet.*broadcast/p’ | sed ‘s/inet\s\+\([0-9\.]\+\).*netmask\s\+\([0-9\.]\+\).*broa*.*\s\+\([0-9\.]\+\)/\1/’
替换\1\2\3取不同的值
练习:获取passwd文件中,用户名、uid、gid
eg:sed ‘s/\(^[a-z_-]\+\):x:\([0-9]\+\):\([0-9]\+\).*/\1 \2 \3/’ passwd
sed的读写操作
r:读取指定文件插入到匹配行
sed ‘1r 123.txt’ abd.txt
读文件不会更改文件内容 1r 代表从第几行开始
w:复制匹配行拷贝到指定文件里
sed ‘1w 123.txt’ abc.txt 复制abc文件的第一行到123的文件中去,123文件内容会变化。
写操作会清除目标文件内容,然后再写内容进去。
sed退出操作
q:退出sed,使用q可以提前退出sed
nl -b a passwd | sed ’10q’ 打印前10行。
nl -b a passwd | sed ‘/false/q’ 打印直到出现false为止
sed连续命令
e:
nl -b a passwd | sed -e ‘10,20d’ -e ‘s/:/%/g’