shell awk命令

awk命令

awk是shell进阶的重要命令，可以用来编排字段

awk把输入流看做一串记录的集合，每条记录都可以进一步细分为字段，一个awk程序是一对以模式和大括号框起来的操作组合而成的，awk每次从文件中读取一条记录

 awk [选项] '条件{动作} 条件{动作}' 文件
 
 -v 设置变量值

pattern {action} 如模式匹配，则执行操作
pattern {action}

# 打印第一个字段
awk 'print $1'
# 打印整行
awk 'print $0'
# 打印第2与第5个字段
awk 'print $2,$5'
# 打印非空行
awk 'NF  > 0 {print $0}'

在读取数据时，默认的分隔符是空格，可以使用-F来指定分隔符

#awk [-F 分隔符] '命令' input-file
# 分隔符默认是空格
# 例： 打印出root用户记录
awk -F: '$1=="root"{print $0}' /etc/passwd

在输出数据时，默认的分隔符是空格，可以使用-v来设置输出字段分隔符

# 默认情况下，-v 改变输出字段的分隔字符,这里必须设置OFS变量来改变输出字段分隔符
awk -F: -v 'OFS=**' '{print $1,$5}' /etc/passwd

保存单一值的变量叫做标量变量，常用的有

NF 当前记录的字段数

NF == 0    选定空记录
NF > 3     选定拥有三个字段以上的记录
NF < 5     选定第1到第4条记录

可以使用-v来设置自定义变量

free | awk -v age="10" -v name="lily" '{print name,age}'

lily 10
lily 10
lily 10

BEGIN导致动作指令仅在读取任何数据记录之前执行一次

awk 'BEGIN {print "OK"}'
OK

END导致动作指令仅在读取完所有数据记录后执行一次

free | awk 'END {print "共有"NR"行"}'
共有3行

awk还支持if判断语句

if(判断条件){
动作指令1;
} else if(判断条件2){
动作指令2;
} else {
动作指令N;
}

free | awk '{if(NR==1){print $1}else if(NR==2){print $2}}'
total
8008932

awk还支持循环，如for循环、while循环，且支持使用continue、break、exit来进行中断

for(表达式1;表达式2;表达式3) {
动作指令序列
}

awk 'BEGIN{ for (i=1;i<=4;i++) {print i}}'
1
2
3
4

while(条件判断){
动作指令序列;
}

awk 'BEGIN{ i=1; while(i<=4) {print i;i++}}'
1
2
3
4

awk通过内建变量ARGC(参数计数)和ARGV(参数值)让命令行参数可用

awk 'BEGIN {print ARGV[0]}'
输出 awk

awk 'BEGIN {for (k=0;k<ARGC;k++) print "ARGV["k"]=["ARGV[k]"]"}' a b c
ARGV[0]=[awk]
ARGV[1]=[a]
ARGV[2]=[b]
ARGV[3]=[c]

统计磁盘可用空间

df | grep -v tmpfs | awk '{sum+=$4} END{print "磁盘可用容量:"sum/1024/1024"G"}''
磁盘可用容量:1.01912G

统计Nginx各ip访问次数

awk ' 
> {IP[$3]++} 
> END { 
> for (i in IP) {print i,IP[i]} 
> }' /var/log/nginx/access.log

https://zhhll.icu/2022/Linux/shell/awk命令/

原文始发于微信公众号（bug生产基地）：shell awk命令

文章由极客之音整理，本文链接：https://www.bmabk.com/index.php/post/176511.html