当前位置：首页 > backend >正文

运维三剑客——awk

backend 2025/7/12 23:01:08

grep

awk是一个强大的linux命令，有强大的文本格式化的能力，好比将一些文本数据格式化成专业的excel表的样式
awk早期在Unix上实现，我们用的awk是gawk，是GUN awk的意思

awk更是是一门编程语言，支持条件判断、数组、循环等功能

再谈三剑客
grep，擅长单纯的查找或匹配文本内容
awk，更适合编辑、处理匹配到的文本内容
sed，更适合格式化文本内容，对文本进行复杂处理
三个命令称之为Linux的三剑客

awk文本格式化

awk语法
1. awk [option] 'pattern{action}' file ...
2. awk 参数 ‘条件动作’ 文件

awk options 模式 pattern {action} 文件/数据

- Action指的是动作，awk擅长文本格式化，且输出格式化后的结果，因此最常用的动作就是 print 和 printf

文本内容，，，，打印第一列

打印第二列

我们执行的命令是 awk '{print $2}'，没有使用参数和模式，$2 表示输出文本的第二列信息
awk默认以空格为分隔符，且多个空格也识别为一个空格，作为分隔符
awk是按行处理文件，一行处理完毕，处理下一行，根据用户指定的分割符去工作，没有指定则默认空格

$0 表示整行
$NF 表示当前分割后的最后一列
倒数第二列可以写成$(NF-1)

awk内置变量
$n 指定分隔符后，当前记录的第n个字段
$0 完整的输入记录
FS 输入字段分隔符，默认为空白字符
OFS 输出字段分隔符，默认为空白字符
RS 输入记录分隔符(输入换行符)，指定输入时的换行符
ORS 输出记录分隔符（输出换行符），输出时用指定符号代替换行符
NF NF: number of Field，当前行的字段的个数(即当前行被分割成了几列)，字段数量
NR NR: 行号，当前处理的文本行的行号。
FNR FNR: 各文件分别计数的行号

打印1，4，5列

打印1，5，3列

自动定义输出内容
awk，必须外层单引号，内层双引号
内置变量 $1、$2 都不得添加双引号，否则会识别为文本，尽量别加引号

awk参数
参数 -F         指定分割字段符
参数 -v         定义或修改一个awk内部的变量
参数 -f         从脚本文件中读取awk命令

显示五到六行

显示三到六行

打印所有行，并写成行数

显示第一列字段数

显示第一列和倒数第二列

awk取IP

awk分隔符

文本内容，，，，-F 定义分隔符，下面是#为分隔符，打印第二列

打印第一列，并显示字段数，然后用“=”连接。

打印第一列，显示字段数，显示行数

awk变量

内置变量

自定义变量
- FS 输入字段分隔符，默认为空白字符
- OFS 输出字段分隔符，默认为空白字符
- RS 输入记录分隔符(输入换行符)，指定输入时的换行符
- ORS 输出记录分隔符（输出换行符），输出时用指定符号代替换行符
- NF NF: number of Field，当前行的字段的个数(即当前行被分割成了几列)，字段数量
- NR NR: 行号，当前处理的文本行的行号。
- FNR FNR: 各文件分别计数的行号
- FILENAME FILENAME: 当前文件名
- ARGC ARGC: 命令行参数的个数
- ARGV ARGV: 数组，保存的是命令行所给定的各参数

处理多个文件显示行号

FNR各文件分别计数