Linux awk 命令详解

合集 - Linux(93)

1.Linux环境变量详解2023-12-242.Linux find命令详解2024-01-203.Linux lsof命令详解2024-02-124.Linux grep命令搜索神器详解2024-02-155.一文吃透Linux htop命令2024-02-186.Linux stdin、stdout和stderr详解2024-03-107.Linux ps命令详解（不是PS）2024-03-238.Linux 著名的sudo、su是什么？怎么用？2024-03-309.Linux 查看磁盘信息：df与du命令详解2024-03-3110.Linux &&、& 各种操作符困惑？ 看此文2024-04-0511.Linux 常用压缩命令全解，一次搞懂通关！2024-04-0612.Linux 硬链接和软链接怎么区分使用？2024-04-1313.推荐一款基于vim的超可扩展文本编辑器neovim2024-04-1414.Linux Systemd基础教程2024-05-0415.Linux rsync命令详解2024-05-2516.C获取程序名称的方法2024-11-1017.Linux ssh 基础教程2024-11-1318.Linux 如何查询命令的二进制文件位置？2024-11-1319.Linux 如何查看当前系统版本的详细信息？2024-11-1420.Linux 用户账户信息配置文件详解2024-11-1521.Linux Debian发行版系统包管理工具使用教程2024-11-1622.Linux dpkg命令详解2024-11-1723.Linux yum 包管理工具使用教程2024-11-1824.Linux sed 命令详解2024-11-19

25.Linux awk 命令详解2024-11-20

26.Linux dnf 包管理工具使用教程2024-11-2127.Linux netstat 命令详解2024-11-2228.Linux ss 命令详解2024-11-2329.Linux nc 命令详解2024-11-2430.Linux 用户与组基础教程2024-11-2531.Linux firewalld 命令详解2024-11-2632.Linux iptables 命令详解2024-11-2733.Linux 中如何使用Mosquitto MQTT?2024-11-2834.Linux xattr 命令详解2024-11-2935.Linux locate 命令详解2024-11-3036.Linux history 命令详解2024-12-0137.Linux sort 命令详解2024-12-0238.Linux下Certbot使用教程2024-12-0339.Linux ufw 命令详解2024-12-0440.Linux ifconfig ip 命令详解2024-12-0541.Linux setfacl lsattr chattr 命令详解2024-12-0642.Linux zsh基础用法2024-12-0743.Linux umask 命令详解2024-12-0944.Linux 如何设置特殊权限?2024-12-1045.Linux tmux 基础教程2024-12-1146.Linux pstree 命令详解2024-12-1247.Linux tinyproxy 使用教程2024-12-1848.Linux crontab 使用教程2024-12-2049.Linux procps-ng 包详解2024-12-2250.Linux xargs 命令使用教程2024-12-2451.Linux 比grep更快的ack命令详解2024-12-2552.Linux下比ack更快的ag搜索命令详解2024-12-2653.Linux axel 下载加速命令详解2024-12-2754.Linux 下的模糊查找神器 fzf 使用教程01-0555.Linux pget 下载命令详解01-0856.Linux ffmpeg 基础用法01-1157.Linux 怎么在储存设备上创建文件系统？01-1958.Linux 如何使用parted进行磁盘分区？01-2059.Linux 如何使用dd命令来复制和转换数据？01-2160.Linux 如何使用fdisk进行磁盘相关的操作？01-2261.Linux pgrep 命令详解01-2362.Linux lsblk 命令详解01-2463.Linux pkill 命令使用详解01-2964.Linux gdisk 命令使用详解01-3065.Linux stat 命令使用详解01-3166.Linux tr 命令使用详解02-0167.Linux mpstat 命令使用详解02-0268.Linux ifstat 命令使用详解02-0369.Linux iostat 命令使用详解02-0470.Linux zcat 命令使用详解02-0571.Linux nmcli 命令使用详解02-0672.Linux iftop 命令使用详解02-0873.Linux 下使用更强的ripgrep来搜索02-0974.Linux inode 详解02-1275.Linux 下aria2 下载神器使用详解02-1376.Linux nftables 命令使用详解02-1577.Linux 磁盘挂载教程02-1878.Linux sftp 使用详解02-1979.Linux 性能更好的ftp客户端 lftp 使用详解02-2280.Linux 使用nload 监控网络流量02-2381.Linux 使用 cut 进行文本提取操作02-2582.Linux 下使用ncdu更好的查看磁盘使用02-2683.Linux 使用 sosreport 生成系统报告02-2784.Linux 下使用tracepath进行网络诊断分析02-2785.Linux 下使用vmstat监控系统性能03-0186.Linux 下使用mtr命令来进行网络诊断03-0287.Linux 下使用traceroute来进行网络诊断分析03-0488.Linux 下使用nslookup和dig来查询域名和ip信息03-0689.Linux 下使用tcpdump进行网络分析03-0690.Linux 使用 partprobe 更新分区表03-0891.Linux expr命令详解03-0992.Linux egrep 命令使用详解03-1193.Linux fgrep 命令使用详解03-12

收起

简介

awk 是 Linux 中强大的文本处理工具，广泛用于模式匹配扫描，数据提取，文本操作。

使用场景：

• 解析日志文件

• 汇总数据

• 格式化文本输出

• 从文件中提取指定的信息

历史

awk 由三个人共同创造的，以三个人的 last name 的首字母组成

• Alfred V. Aho

• Peter J. Weinberger

• Brian W. Kernighan

基本语法

awk 'pattern { action }' file

# pattern 是匹配的模式，如正则表达式
# action 是匹配后进行的操作，如：打印，修改等
# file 要操作的文件，如果不指定文件，则从标准输入中读取

核心概念

记录和字段

• 记录：文件中的每一行作为一个记录

• 字段：字段是记录的一部分，通过指定的分隔符分割，默认的分隔符是空格，可以通过 -F 选项自定义分隔符

其中，$1，$2，$<n> 等代表第几个字段

$NF 代表最后一个字段，$0 代表所有记录，即全部内容

abc def，其中 abc 是一个字段，def 是一个字段

模式

可以是正则表达式、数字比较、条件判断等

要执行的操作

定义在花括号 {} 里面

常用示例

打印所有行数据

awk '{ print $0 }' file

打印指定的字段

awk '{ print $1, $3 }' file

# 打印每行的第一个和第三个字段

打印模式匹配的行

awk '/error/ { print $0 }' file

# 打印包含 error 文本的行

使用条件表达式

awk '$3 > 50 { print $1, $2 }' file

# 当第三个字段大于50时打印第一个和第二个字段

使用范围比较表达式

awk 'NR >= 5 && NR <= 10 { print $0 }' file

# NR表示行号
# 以上表示打印第五到第十行的内容

自定义字段分隔符

awk -F ',' '{ print $1, $2 }' file

# 此处指定分隔符为逗号

内建变量

• $0：所有记录/全部内容

• $1，$1,...：第几个字段

• NF：当前行的字段数

• NR：行号

• FS：字段分隔符

• OFS：输出的字段分隔符

• RS：记录分隔符/行分隔符，默认 \n

• ORS：输出的记录分隔符/行分隔符

高级用法示例

打印行号

awk '{ print NR, $0 }' file

统计字段

awk '{ sum += $3 } END { print "Total:", sum }' file

# 统计每行第三个字段之和

替换字段

awk '{$2 = "REPLACED"; print $0 }' file

# 替换每行的第二个字段值为 REPLACED

打印模式匹配到的行数

awk '/pattern/ { count++ } END { print count }' file

格式化输出

awk '{ printf "Line %d: %s\n", NR, $0 }' file

通过管道处理标准输入

cat file | awk '{ print $1, $2 }'

awk 命令写到脚本里复用

新建 script.awk 文件，写入以下内容：

{ print $1, $NF }

使用 -f 执行脚本文件

awk -f script.awk file