awk '条件类型1{动作1} 条件类型2{动作2} ...' filename
功能
相较于 sed
常常作用于一整个行的处理, awk
则比较倾向于一行当中分成数个『字段』来处理。
描述
awk 的处理流程
-
读入第一行,并将第一行的资料填入 1, $2…. 等变数当中;
-
依据 "条件类型" 的限制,判断是否需要进行后面的 "动作";
-
做完所有的动作与条件类型;
-
若还有后续的『行』的数据,则重复上面 1~3 的步骤,直到所有的数据都读完为止。
经过这样的步骤,您会晓得, awk 是『以行为一次处理的单位』, 而『以字段为最小的处理单位』。
常用变量(变量名称 代表意义)
NF
每一行 ( $0
) 拥有的字段总数
NR
目前 awk 所处理的是『第几行』数据
FS
目前的分隔字符,预设是空格键
每一行的每个字段的变量名称就是 $1
, $2
… 等。还有个例外,那就是 $0
代表一整行的意思。
注意, awk
后续的所有动作以 ' 括住, 所以,内容如果想要以 print
打印时,记得,非变量的文字部分, printf
提到的格式中,都需要使用双引号.
逻辑运算符号
大于
< 小于
= 大于或等于
<= 小于或等于
== 等于
!= 不等于
举例
假设输入输出如下:
$last
dmtsai pts/0 192.168.1.12 Mon Aug 22 09:40 still logged in
root tty1 Mon Aug 15 11:38 - 11:39 (00:01)
reboot system boot 2.6.11 Sun Aug 14 18:18 (7+15:41)
dmtsai pts/0 192.168.1.12 Fri Aug 12 12:07 - 12:08 (00:01)
-
打印每行的第1列和第三列,并且用[TAB]隔开
输入输出如下
$last | awk '{print $1 "\t" $3}' dmtsai 192.168.1.12 root Mon reboot boot dmtsai 192.168.1.12
这里,我们没有设定条件,也就是无论哪一行都做同样处理,所以第2,3行显示的有点"不正常"。由此可知awk是“迭代”处理每一行的。
-
列出每一行的账号,目前处理的行数, 以及该行有多少字段
输入输出如下
$last | awk '{print $1 "\t lines: " NR "\t columes: " NF}' dmtsai lines: 1 columes: 10 root lines: 2 columes: 9 reboot lines: 3 columes: 9 dmtsai lines: 4 columes: 10
-
查阅
/etc/passwd
,第3栏小于 10 以下的数据,并且仅列出账号与第3栏输入输出如下:
$cat /etc/passwd | awk '{FS=":"} $3 < 10 {print $1 "\t " $3}' root:x:0:0:root:/root:/bin/bash bin 1 daemon 2 ......(以下省略)......
这里,在
/etc/passwd
当中是以冒号 ":" 来作为字段的分隔,所以需要设置一下。但是我们读入第一行的时候, 那些变数 2… 预设还以空格键为分隔,所以虽然我们定义了 FS=":" 了, 但是却仅能在第二行后才开始生效(可能因为一般第一行仅仅是列名不需处理,而这里却是特例,见例4改进)。 -
对上面过滤的操作改进
输入输出如下:
$ cat /etc/passwd | awk 'BEGIN {FS=":"} $3 < 10 {print $1 "\t " $3}' root 0 bin 1 daemon 2 ......(以下省略)......
利用 BEGIN 这个关键词,可以从第一行就生效了。实际除了BEGIN,还有END。
假设如下表(pay.txt)
Name 1st 2nd 3th
VBird 23000 24000 25000
DMTsai 21000 20000 23000
Bird2 43000 42000 41000
-
计算每一行总额,添加追加到最后一列
输入输出如下:
$awk 'NR==1{printf "%10s %10s %10s %10s %10s\n",$1,$2,$3,$4,"Total" } NR>=2{total = $2 + $3 + $4 printf "%10s %10d %10d %10d %10.2f\n", $1, $2, $3, $4, total}' Name 1st 2nd 3th Total VBird 23000 24000 25000 72000.00 DMTsai 21000 20000 23000 64000.00 Bird2 43000 42000 41000 126000.00
注意:所有的动作在
{}
内,如需多个指令辅助,可利用分号;
间隔或直接以[Enter]
按键来隔开每个指令,例如上面的 NR>=2 后面接的动作, 利用 total = … 那个指令来指定加总,而后续则以printf
来格式化输;格式化输出时,在printf
的格式设定当中,务必加上\n
,才能进行分行;与bash shell
的变量不同,在awk
当中,变量可以直接使用,不需加上$
符号(如total)。
其它
参考资料: 《鸟哥的私房菜》
网友评论