Shell正则表达式笔记

一、正则表达式是什么？

正则表达式是用于描述字符排列和匹配模式的一种语法规则。它主要用于字符串的模式分割、匹配、查找及替换操作。

二、正则表达式与通配符

1. 正则表达式

用来在文件中匹配符合条件的字符串，正则表达式是“包含匹配”。grep、awk、sed等命令可以支持正则表达式。

2. 通配符

用来匹配符合条件的文件名，通配符是“完全匹配”。ls、find、cp这些命令不支持正则表达式，所以只能使用shell自己的通配符来进行匹配了。

3. 通配符包括

* 匹配任意字符

? 匹配任意一个字符

 [] 匹配中括号中的任意一个字符

三、cut命令

cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段写至标准输出。

 常用参数

-b ：以字节为单位进行分割。这些字节位置将忽略多字节字符边界，除非也指定了 -n 标志。
-c ：以字符为单位进行分割。
-d ：自定义分隔符，默认为制表符。
-f ：与-d一起使用，指定显示哪个区域。
-n ：取消分割多字节字符。仅和 -b 标志一起使用。

四、printf命令

1. 命令格式

printf   '输出类型输出格式'   输出内容

2. 输出类型

%ns：输出字符串。n代表输出几个字符,n省略则代表全部字符

%ni：输出整数。n是指输出几个数字，n省略代表所有数字

%m.nf：输出浮点数。m和n是数字，指代输出的整数位数和小数位数。如%8.2f则代表共输出8位数，其中2位是小树，6位是整数。

3. 输出格式

\a：输出警告声音

\b：输出退格键（Backspace）

\f：清除屏幕

\n：换行

\r：回车（Enter）

\t：水平输出退格键

\v：垂直输出退格键 

五、awk命令

命令格式:

awk '条件1{动作1}条件2{动作2}...' 文件名

条件：一般使用关系表达式作为条件，如x > 10

动作：格式化输出、流程控制语句

awk所支持的正则表达式元字符

 

六、sed命令

1. 命令格式

sed [选项] '[动作]' 文件名

2. 选项

-n：一般sed命令会把所有数据都输出到屏幕，如果加入此选择，则只会把经过sed命令处理的行输出到屏幕。

-e：允许对输入数据应用多条sed命令编辑。

-i：用sed的修改结果直接修改读取数据的文件，而不是由屏幕输出。

3. 动作

a：追加，在当前行后添加一行或多行

c：行替换，用c后面的字符串替换原数据行

i：插入，在当前行前插入一行或多行。

d：删除，删除指定的行

p：打印，输出指定的行

s：字符串替换，用一个字符串替换另一个字符串。格式为“行范围/s/旧字符串/新字符串/g”(和vim中的替换格式类似)

 

grep 实例运用:

主要以正则： 
(([0-9]|[1-9][0-9]|1[0-9]{2}|2[0-4][0-9]|25[0-5])\.){3}([0-9]|[1-9][0-9]|1[0-9]{2}|2[0-4][0-9]|25[0-5])来过滤合理IP地址；

[root@ansible ~]# ifconfig eth0 |grep -Eoe "(([0-9]|[1-9][0-9]|1[0-9]{2}|2[0-4][0-9]|25[0-5])\.){3}([0-9]|[1-9][0-9]|1[0-9]{2}|2[0-4][0-9]|25[0-5])"

192.168.1.10
255.255.255.0
192.168.1.255