sed基础
sed 文本流编辑的 行编辑器
hold space :保持空间。仓库,半成品
一次从文件中读取一行,放到自己编辑的内存缓冲空间即模式空间,不会编辑原文件;根据所给定的命令在模式空间中做编辑处理,处理结果默认输出到显示屏
sed [OPTION]... {script-only-if-no-other-script} [input-file]...
常用选项:
-n :不输出模式空间中的内容至屏幕
-e : 多点编辑 一个sed中实现多个编辑操作
-f :/PATH/TO/SCRIPT_FILE :从指定文件中读取编辑脚本
-r :支持使用扩展表达式,默认expr
-i :原处编辑即修改原文件 注慎用先备份
一、地址定界:
a) 不给地址:对全文进行处理
# sed 'd' /etc/passwd
b) 单地址:
# : 指定的行
sed '5d' /etc/passwd
/pattern/ :被此处模式所能够匹配到的每一行
sed '/^#/d' /etc/fstab
c) 地址范围:
d) $ (^$ 、^[[:space:]]*$)
删除某文件中的空行 sed '/^$/d' /tmp/fstab 删除某文件中空白行 sed '/^[[:space:]]*$/d' /tmp/fstab
e) ! 表示方法:地址定界! 取反条件
删除地址界定的行 sed '/^UUID/d' /etc/fstab 删除非地址界定的行 sed '/^UUID/!d' /etc/fstab
f) ~ 步进
奇数行 sed -n '1~2p' /tmp/fstab sed '2~2p' /tmp/fstab 偶数行 sed -n '2~2p' /tmp/fstab sed '1~2p' /tmp/fstab
二、编辑命令:
d : 删除范围内的行
删除地址范围内的行 sed '/^UUID/d' /tmp/fstab sed '1.3d' /tmp/fstab
p : 打印当前模式空间中的内容
sed 'p' /tmp/fstab 每一行会显示2遍,因为sed默认打印模式空间中的内容,符合条件的内容又打印一遍。 sed -n 'p' /tmp/fstab
仅显示符合条件的行
sed -n '/^UUID/p' /tmp/fstab sed -n '1p' /tmp/fstab
a \'text' 在地址界定行的下一行追加(append)文本
支持换行追加:\n
在某文件第一行之后添加 sed '1a \hello ' /tmp/fstab 在某文件的1到3行每一行追加文本 sed '1,3a \hello ' /tmp/fstab [root@localhost tmp]# sed -n '/^UUID/a \hello \nHow are you ? ' /tmp/fstab hello How are you ?
i \'text' 在地址界定行的上一行插入(insert)文本
支持换行插入:\n
在某文件第一行之上插入 sed '1i \hello ' /tmp/fstab 在某文件的1到3行每一行掺入文本 sed '1,3i \hello ' /tmp/fstab [root@localhost tmp]# sed -n '/^UUID/i \hello \nHow are you ? ' /tmp/fstab hello How are you ?
c \'text' 在地址界定的行 替换为text
支持换行替换:\n
替换某文件第一行 sed '1c \hello ' /tmp/fstab 替换某文件的1到3行,为指定的text sed '1,3c \hello ' /tmp/fstab [root@localhost tmp]# sed -n '/^UUID/c \hello \nHow are you ? ' /tmp/fstab hello How are you ?
w /PATH/TO/SOMEFIE 将地址界定的行,保存至/PATH/TO/SOMEFIE中
sed '/^UUID/w /tmp/a.txt ' /tmp/fstab
sed -n '/^UUID/p' /etc/fstab > b.txt
r /path/to/somefile :读取指定文件的文本流至模式空间中匹配到的行的行后
将某文件中的内容插入至指定文件中
sed '/^UUID/r /etc/issue' /etc/fstab
sed '1,3r /etc/centos-release' /etc/issue #多行插入文本时,在其后插入
= :为模式空间中的行打印行号
编号:在匹配到的行,上面编号 sed '/^UUID/=' /tmp/fstab sed '=' /tmp/fstab
s/// : 支持使用其它分隔符,或使用s@@@ 、s### 、s||| 、s,,
替换标记 :
g 全局替换
p : 显示替换成功的行
w /PATH/TO/SOMEFILE : 将替换成功的结果保存至指定文件中
i : 忽略pattern的字符大小写
sed -n 's/r..t/&er/p' /etc/passwd #此处“&”代表引用前面的“r..t”
# sed 's,,,w /PATH/TO/SOMEFILE' FILE
# sed 's,,,' FILE > /PTH/TO/SOMEFILE
[root@localhost bin]# head -n 1 < /etc/passwd | sed 's,rOOt,ROOT,gi'
ROOT:x:0:0:ROOT:/ROOT:/bin/bash
向后引用:
正则表达式引擎将 括号中模式匹配到的内容 记录至内置特殊变量中 \1 \2 \3 ....
s/([a-z]*([^/]+))
\1 此处例子代表[a-z]*[^/]+ 所匹配到内容
\2 [^/]+ 所匹配到的内容
基本正则表达式:\(\)
扩展正则表达式:()
练习1:删除/boot/grub/grub.conf文本中所有以空白开头的行行首的空白字符
sed 's@^[[:space:]]\+@@' /tmp/grub.conf CentOS 7: # cp /etc/grub2.cfg /tmp/grub2.cfg # sed -i 's,^[[:space:]]\+,,' /tmp/grub2.cfg
练习2:删除/etc/fstab文件中所有以#开头,后面至少跟一个空白字符的行的行首的#和空白字符
sed 's@^#[[:space:]]\+@@' /tmp/fstab sed -i -r 's|^#[[:space:]]+||' /tmp/fstab
练习3:echo 一个绝对路径给sed命令:取出其基名,取出目录名
目录
echo /etc/fstab | sed 's@[^/]\+/\?$@@'
基名
echo /etc/fstab | sed -r 's@(.*/)@@'
[root@localhost tmp]# echo /etc/fstab | sed -r 's@(.*/)([^/]+$)@\2@'
注:
sed中使用正则表达式进行替换的时候,一定要注意,有些特殊字符在使用时要转义,目前发现的有:
- 用于分组的小括号:(),在使用时要用\进行转义,但是匹配字符串中真正的小括号时,无需转义;
- 表示前面的表达式出现次数的{},也要转义;
- 表示前面的表达式出现1次或多次的+,也要转义,在使用时,要用\+
- 表示前面的表达式至多出现1次?,也要转义,在使用时,要用\?
不需要转义的特殊字符:
- 用于表示字符集的[]
- 表示前面的表达式出现0次或多次的*
有些特殊字符在sed的正则表达式中不能用,比如要表示匹配一个数字不能用\d,而要用[0-9] 。但是\b、\w可以用,分别表示单词边界
特殊字符的使用
- "^"表示行首
- "$"符号如果在引号中表示行尾, 但是在引号外却表示末行(最后一行)
# 注意这里的 " & " 符号, 如果没有 "&", 就会直接将匹配到的字符串替换掉 sed 's/^/添加的头部&/g' #在所有行首添加 sed 's/$/&添加的尾部/g' #在所有行末添加 sed '2s/原字符串/替换字符串/g' #替换第 2 行 sed '$s/原字符串/替换字符串/g' #替换最后一行 sed '2,5s/原字符串/替换字符串/g' #替换 2 到 5 行 sed '2,$s/原字符串/替换字符串/g' #替换 2 到最后一行
三、高级编辑命令:(不常用)
模式空间(pattern) 保持空间(hold space)
注:保持空间不会做任何处理
------》to hold
h :把模式空间中的内容覆盖至保持空间中;
H:把模式空间中的内容追加至保持空间中;
get《-----
g :从保持空间取出数据覆盖至模式空间;
G :从保持空间取出内容追加至模式空间;
x <----->将模式空间中的内容与保持空间的中内容进行互换
n 匹配到的行 在处理时,将其下一行覆盖至模式空间中
N 匹配到的行 在处理时,将其下一行追加至pattern
d 匹配到的行 处理时,删除模式空间中的单行;
D 删除多行模式空间中的多行
sed -n 'n,p' FILE 显示偶数行 sed 'n;d' FILE 显示奇数行
tac FILE 逆向显示文件内容
sed '1!G;h;$!d' FILE 逆向显示文件内容 sed -n '1!G;h;$p' FILE
sed '$!N;$!D' FILE <==> tail -2 FILE 显示文件最后两行
sed '$!d' FILE 取出文件最后一行
每一行后添加一个空白行
sed 'G' FILE sed 'a\ ' '' FILE
sed 'g' FILE 全部替换为空白行
sed '/^$/d;G' FILE 删除多个空白行,在每个行后添加一个空白行