Shell命令

1.shell命令的执行机制:fork+exec执行命令(任何的shell都会执行)

2.shell中的用户输入处理

1  命令行参数:选项、参数
2  运行时输入
3  read命令:
4  1.基本读取、
5  2.超时处理-t选项、
6  3.隐藏方式读取-s选项)
7  4.从文件中读取

3.shell的反引号

1 /*
2 ``反引号在Linux shell命令行中有特殊的含义:反引号间的内容,会被shell先执行。其输出被放入主命令后,主命令再被执行。命令替换,即完成引用的命令的执行,将其结果替换出来,与变量替换差不多
3 */
4 echo `date '--date=1 hour ago' +%Y-%m-%d-%H`  
5 echo $(date '--date=1 hour ago' +%Y-%m-%d-%H)

4.setuid

 setuid位是让普通用户可以以root用户的角色运行只有root帐号才能运行的程序或命令。
 因此当程序设置了setid权限位时,普通用户会临时变成root权限,但实际用户任然是原来的mike。

5.linux文件

 /etc/mtab文件的作用:记载的是现在系统已经装载的文件系统,包括操作系统建立的虚拟文件等;
/etc/fstab是系统准备装载的find命令:以递归的方式进行搜索文件或文件夹

6.find命令

1 1  --查找当前目录下所有文件中包含deposit_account的文件 
2 2  -- f 普通文件 l 符号连接 d 目录 c 字符设备 b 块设备 s 套接字 p Fifo
3 3  find . -type f -print |xargs grep "deposit_account"
4 4  --查找根目录下名字为create.txt的文件
5 5  find / -name "create.txt"
6 6  --查找根目录下文件大小大于100M的文件
7 7  find / -size +100M
8 8  --使用find查找png和jpg的文件 -o 指定多个-name选项
9 9  find . -name '*.png' -o -name '*.jpg' -type f
find

7.for循环

 1  1  /*for 变量名 in 取值列表({1..100}--1到100依次执行、{1..100..2} --间隔2个)
 2  2  do
 3  3     命令序列
 4  4  done
 5  5  --举例*/
 6  6  sum=0
 7  7  for ((i=1;i<100;i++))
 8  8  do
 9  9     sum=$($i+$sum)
10 10  done
11 11     echo "0-100的和为:" $sum
for循环

8.正则表达式

 1  1  --行首定位符“^”:用来匹配行首的字符
 2  2  --列出etc目录下以po开头的文件
 3  3  str='ls /etc |grep "^po"'
 4  4  echo "$str"
 5  5 6  6  --行尾定位符“$”
 7  7  str='ls /etc |grep "conf$"'
 8  8  echo "$str"
 9  910 10  --单个字符匹配“.”:圆点“.”用来匹配任意单个字符,包括空格,但是不包括换行符“\n”
11 11  --列出所有的包含字符串“13”的文件名
12 12  str=`cat dian.txt | grep "13"`
13 13  echo "$str"
14 14  echo "-------------"
15 15  --列出包含字符串'13'以及另外一个字符的文件名
16 16  str=`cat dian.txt | grep "13."`
17 17  echo "$str"
18 1819 19  --限定符“*”:用来指定其前面的一个字符必须要重复出现多少次才能满足匹配
20 20  str=`ls /etc | grep "^sss*"`
21 21  echo "$str"
22 2223 23  --字符集匹配“[]”
24 24  /*"[a-f]”表示匹配字母表中a到f中的任意一个字母。
25 25  “[0-9]”表示匹配任意单个数字
26 26  "[^b-d]” 匹配除了从 b 到 d 范围内所有的字符  --取反
27 27  */
28 28  --筛选所有以字符r开头,并且紧跟着1个字符c的文本行
29 29  str='ls /etc |grep "^rc"'
30 30  echo "$str"
31 31  echo "---------------------"
32 32  --筛选所有以字符r开头,紧跟着1个字符为c,下面1个字符为单个数字的文本行
33 33  str='ls /etc | grep "^rc[0-9]"'
34 34  echo "$str"
35 3536 3637 37  --字符集不匹配“[^]”:表示不匹配其中列出的任意字符
38 38  "[^b-d]” 匹配除了从 b 到 d 范围内所有的字符  
39 3940 40  --反斜杠字符 \转义  使这个字符表示原来字面上的意思
41 41  “\$“表示了原来的字面意思”$”,而不是在正则表达式中表达的匹配行尾的意思.
42 4243 43  --转义(escape) “尖角号” \<...\>
44 44  用于表示单词的边界. 尖角号必须被转义,因为不这样做的话它们就表示单纯的字面意思而已."\<the\>" 匹配单词"the",但不匹配"them", “there”, “other”, 等等.
正则表达式

9.扩展正则表达式

 1  1 --限定符“+” :匹配一个或多个前面的字符.和*相似,区别是它不匹配零个字符的情况.
 2  2  --筛选以字符串“ss”开头,后面至少紧跟着1个字符“s”的文本行
 3  3  str=`ls /etc | egrep "^sss+"`
 4  4  echo "$str"
 5  5  --输出
 6  6  sssd
 7  7 8  8  --限定符“?”:限定前面的字符最多只出现1次,即前面的字符可以重复0次或者1次。
 9  9  str=`ls /etc | egrep "^sss?"`
10 10  echo "$str"
11 11  --输出
12 12  ssh
13 13  ssl
14 14  sssd
15 1516 16  --竖线“|” 和圆括号“()”:
17 17  --竖线“|” 表示多个正则表达式之间“或”的关系
18 18  --竖线“|” 表示多个正则表达式之间“或”的关系
19 19  #筛选含有字符串“ssh”、“ssl”或者以字符串“yum”开头的文本行
20 20  #grep -E主要是用来支持扩展正则表达式
21 21  #grep -E =egrep
22 22  str=`ls /etc | egrep "(ssh|ssl|^yum)"`
23 23  echo "$str"
24 2425 2526 26  --转义“大括号”{}指示前边正则表达式匹配的次数,要转义是因为不转义的话大括号只是表示他们字面上的意思
27 27[0-9]\{5\}” --精确匹配 5 个数字 (从 0 到 9 的数字)
扩展正则表达式

10.perl正则表达式

1  --数字匹配\d 符号“\d”匹配从0到9中的任意一个数字字符,等价于表达式“[0-9]”
2  --筛选以字符串rc开头,紧跟着一个数字的文本行 -P可以让grep使用perl的正则表达式语法
3  str=`ls /etc | grep -P "^rc\d"`
4  echo "$str"
5 6  --非数字匹配\D  “\D”等价于表达式“[^0-9]”
7  --空白字符匹配\s :匹配任何空白字符,包括空格、制表符以及换页符=“[\f\n\r\t\v]”。
8  --非空白字符匹配\S:符号“\S”匹配任何非空白字符,等价于表达式“[^\f\n\r\t\v]”
perl正则表达式

处理海量数据的命令:grep、cut、awk、sed

grep、sed命令是对行进行提取

cut、awk命令是对列进行提取

11.grep命令

 1  /*
 2  grep [选项]...[内容]...[file]
 3  -v 对内容进行取反提取
 4  -n 对提取的内容排列,显示行号
 5  -w 精确匹配
 6  -i 忽略大小写
 7  ^  匹配行首
 8  -E 正则匹配
 9  */
10  grep 'user' /etc/passwd  --匹配包含user的行
11  grep -n 'user' /etc/passwd --显示行号
grep

12.awk命令

 1  /*
 2  而awk比较倾向于将一行分成多个"“字段"然后再进行处理。awk信 息的读入也是逐行读取的,在使用awk命令的过程 中,可以使用逻辑操作符”&“表示"与”、"||表示"或"、"!“表示非”;还可以进行简单的数学运算,如H+、 -、*、/、%、^分别表示加、减、乘、除、取余和乘方。
 3  awk 选项 '{操作}' 文件名
 4  */
 5  awk '{print}' zz.txt   --默认输出所有
 6  awk -F: '{print $1}' zz.txt  --分隔符为:输出第一列
 7  echo 'this is a test' | awk '{print $NF}'  --$NF表示最后一个字段
 8  awk -F ':' '{ print toupper($1) }' demo.txt  --将输出的字符转成大写
 9  --awk '条件 动作' 文件名  结合正则表达式
10  awk -F ':' '/usr/ {print $1}' demo.txt  --只输出包含usr的行
11  awk -F ':' 'NR % 2 == 1 {print $1}' demo.txt --输出奇数行
12  awk -F ':' '$1 == "root" {print $1}' demo.txt --输出第一个字段等于指定值的行
awk

13.route命令

 1  /*
 2  在网络中,route命令用来显示、添加、删除和修改网络的路由。
 3  route [-f] [-p] [Command] [Destination] [mask Netmask] [Gateway] [metric Metric] [if Interface]
 4  route -f:用于清除路由表
 5  route -p:用于创建永久路由
 6  route Command:主要有print(打印路由)、ADD(添加路由)、DELETE(删除路由)、CHANGE(修改路由)4个常用命令
 7  route Destination:表示到达的目的IP地址
 8  route MASK:表示子网掩码的关键字
 9  route Netmask:表示具体的子网掩码,如果不进行设置,系统默认设置成255.255.255.255(单机IP地址),添加掩码时要注意,特别是要确认添加的是某个IP地址还是IP网段,如果代表全部出口子网掩码可用0.0.0.0
10  route Gateway:表示出口网关
11  route interface:表示特殊路由的接口数
12  route metric:表示到达目的网络的跳数
13  -net 后面跟的是目标网络,gw就是gateway(网关入口)
14  */
15  --局域网的网络地址192.168.1.0/24,局域网络连接其它网络的网关地址是192.168.1.1。主机192.168.1.20访问172.16.1.0/24网络时,其路由设置正确的是
16  route add –net 172.16.1.0 gw 192.168.1.1 netmask 255.255.255.0 metric 1
route

14.cut命令

1  cut是一个选取命令,就是将一段数据经过分析,取出我们想要的。一般来说,选取信息通常是针对“行”来进行分析的
2  cut  [-bn] [file] 或 cut [-c] [file]  或  cut [-df] [file]
3  -b :以字节为单位进行分割。这些字节位置将忽略多字节字符边界,除非也指定了-n标志。
4  -c :以字符为单位进行分割。
5  -d :自定义分隔符,默认为制表符。
6  -f  :与-d一起使用,指定显示哪个区域。
7  -n :取消分割多字节字符。仅和 -b 标志一起使用。如果字符的最后一个字节落在由 -b 标志的 List 参数指示的<br />范围之内,该字符将被写出;否则,该字符将被排除。
8
cut

15.sed命令

 1  -n --把匹配到的行输出打印到屏幕
 2  p  --以行为单位进行查询,通常与-n一起使用
 3  eg:df -h | sed -n '2p'     --打印第二行
 4  d   --删除  eg :df -h |sed '2d'  --删除第二行
 5  a   --在行下边插入新的内容 eg:sed '2d 122344' 1.txt   
 6  i   --在行上边插入新的内容 eg:sed '2i 122344' 1.txt   
 7  c   --替换               eg:sed '2c 122344' 1.txt
 8  s/被替换的内容/新的内容/g   --eg: sed s/"//g  1.txt
 9  -i   --对源文件进行修改    --eg: sed -i s/"//g  1.txt
10  -e   --表示可以执行多条动作
11  sed -n '/100%/p' 1.txt   --匹配到100%的打印出来
sed

16.xargs命令

1 /*xargs是给其他命令传递参数的一个过滤器,也是组合多个命令的一个工具,它擅长将标准输入数据转换成命令行采纳数。xargs能够处理管道或者stdin并将其转换成特定命令的命令参数。xargs也可以单行或多行文本输入转换为其他格式,例如多行转单行,单行转多行。xargs的默认命令是echo,空格是默认定界符。
2  */
3  --多行换入单行输入
4  cat test.txt | xargs
5  ---n 选项多行输出
6  cat test.txt  | xargs -n3
7  --d 自定义定界符
8  echo "abcadbsbdkvbwwlg" | xargs -db
xargs

17.sort命令

 1 /*
 2 sort命令将文件的每一行作为比较对象,通过将不同行进行相互比较,从而得到最终结果。比较原则是从首字符开始,向后依次按ASCII码值进行比较,最后将结果按升序输出
 3 参数:
 4 sort -u  :在输出行中去除重复行
 5 sort -r  :sort命令默认的排序方式是升序,如果想改成降序,就需要加上 -r
 6 sort -o  :由于sort默认是把结果输出到标准输出,所以需要用到重定向才能将结果写入文件,形如sort filename > newfile。但是,如果你想把排序结果输出到原文件中,用重定向可就不行了,需要 
 7 */
 8 sort -n -k 2 -t : facebook.txt  --以冒号分割开,以第二列进行排序
 9 sort -r number.txt -o number.txt --排序后重定向到number.txt
10 cat words.txt|xargs -n 1 |sort -r
View Code

18.uniq命令

 1 /*
 2 uniq 命令用于检查及删除文本文件中重复出现的行列,一般与 sort 命令结合使用。
 3 uniq 可检查文本文件中重复出现的行列,直接去重
 4 -c: 在每列旁边显示该行重复出现的次数。
 5 -d: 仅显示重复出现的行列,显示一行。
 6 -D: 显示所有重复出现的行列,有几行显示几行。
 7 -u: 仅显示出一次的行列
 8 -i: 忽略大小写字符的不同
 9 -f Fields: 忽略比较指定的列数。
10 */
11 --统计words文件里边每个单词出现的次数
12 cat words.txt|xargs -n 1 |sort -r |uniq -c |awk 'print{$2" "$1}'  
13 --忽略第一列的字符
14 uniq -c -f 1 uniq.txt
15 --忽略前边四个字符
16 uniq -c -s 4 uniq.txt
View Code

 

 

 
posted @ 2022-09-20 17:43  程序界第一佳丽  阅读(376)  评论(0编辑  收藏  举报