Linux入门系列——awk命令详解

awk是一个强大的文本分析工具，与grep、sed相比，awk在对数据分析并生成报告时，显得有很大的优势。

awk有三个不同的版本：awk、nawk和gawk，在没有做特殊说时的时候默认的就是gawk，gawk是awk的GNU版本。

其中command是真正的awk命令，-F表示域的分隔符，是个可选项。Filename是等待处理的文件

将所有的awk命令写入到一个文件，并使用该文件有X权限，然后awk命令解释器作为脚本的首行，也就是说可以把脚本最开始的 #!/bin/bash 换成 #!/bin/awk

最后直接执行这个脚本文件就行了。

-f 指定要加载的awk脚本，是一个文件。Filename是等待处理的文件

awk的工作流程是这样的：读入一行后(最后面带有” ”的)，就按-F指定的分隔符来将该行划分成N个区域， 总结：awk先执行BEGIN内的命令，然后再读入文件中的行，接着就是按照指定的分隔符将该行分成N个区域，然后再来执行模式所对应的动作action。然后，再来读入第二行。。再重复执行action，直到所有的行都处理完成。最后再执行END中的命令。 表示所有的区域，表示第一个域，表示第二个域，依此类推，$n表示第n个域。

//

注意：' delete array[index] '之间是支持正则表达式的，如果此处只有pattern,而没有action，那么awk默认会把匹配到的行打印出来。

awk中的print还可以使用C语言中的printf来替代。在输出格式比较复杂的时候使用printf函数会比print函数要更直观一些，如下：

还可以使用-v key=value来自定义变量。如下：

awk中的条件语句是从C中借鉴过来的

语法：if (condition) {then-body} else {else-body}

例如使用awk来统计某个目录下的普通文件的大小，不包括子目录的，并过滤掉目录。

循环语句也和C中的一样，支持while、do/while、for、continue、break等关键字。

break和continue常用于循环中；

在awk中，数组的下标可以是数字或字母。一般awk中的数组的作用是从记录中收集信息，用于计算总和、统计单词等。

在awk中要删除一个元素的时候使用 格式符

更多请参见awk官方文档[http://www.gnu.org/software/gawk/manual/gawk.html]

一次读取一行文本，按输入分隔符进行切片，切成多个组成部分，将每片直接保存在内建的变量中，$1,$2,$3....，引用指定的变量，可以显示指定段，或者多个段。如果需要显示全部的，需要使用$0来引用。可以对单个片段进行判断，也可以对所有段进行循环判断。

其默认分隔符为空格

awk [options] 'program' FILE......

[options]说明

主要有两种模式

1、 awk [options] 'scripts' file1,file2.....

在这种模式中，scripts主要是命令的堆砌，命令之间用 分号 分割；对输入的文本行进行处理，通过命令 print,printf 或是输出重定向的方式显示出来，这里经常用到的知识点是：awk的内置变量，以及命令print和printf的使用

2、 awk [options] 'PATTERN{action}' file,file2.....

在这种模式中，最重要的是5种模式和5种action的使用，以及awk的数组的使用和内置函数

其格式化输出： printf FORMAT,item1,item2....

例子： awk '{printf "%-8s %-8s %-8s %-18s %-22s %-15s\n",$1,$2,$3,$4,$5,$6}' netstat.txt

修饰符

输出重定向

'/模式/{动作} '

awk [option] 'PATTERN{action}' file1,file2....

Linux三剑客awk命令篇二：命令 *** 作符

关于awk的原理等基本知识请参考上篇：

Linux三剑客awk命令篇一：原理及基本命令

补充

1、语法格式：

(1) Awk完整语法

awk 'BEGIN{commands} pattern{commands}END{commands} ' file

BEGIN{commands}：处理数据前执行的命令。

END{commands}：处理完数据后执行的命令。

这两个命令可以省略。见(2)

(2) Awk基本语法

awk -F '分割符' '/模式/{动作} ' file

这里的 /正则表达式/ 类似于sed的命令格式。

模式：

(1) 正则表达式(注意格式： 用来找谁， )

(2) 条件表达式(例如：><等等)

总结：

这里的模式通俗来讲是 干啥。 而动作表示是 案例1

2、 awk的命令 *** 作符

(1) 正则表达式与bash一致

(2) + - * / % ++ --

(3) &&|| ！

(4) ><>= <= != == ~ !~

~：表示匹配后面的模式，用于字段，见 Linux三剑客awk命令篇二之内部变量 。

其余的都比较常见就不举例了。

3、案例

案例1：

~使用案例

awk -F : '$3 ~ /\<...\>/{print $1,$3}' /etc/passwd

解释：

模式：\<...\>

\<\>表示定界符，只匹配3个字符。

$3 ~：表示$3这个字段必须符合后面模式(\<...\>)的要求。

见如下输出结果，$3都是3个字符。

案例2：

% || ==使用案例

seq 100 | awk '$1 % 7 == 0 || $1 ~ /^99/{print $1}'

输出结果的要求：

整除7或者以99开头

案例3：

++使用

awk 'BEGIN{num=0}{num++}END{print num}' /etc/passwd

简单解释：

BEGIN{num=0}：定义一个变量num

{num++}：这里没有模式，只有动作。

即每匹配到文件/etc/passwd的一行就执行num++

END{print num}：文件遍历结束，打印num的值，即文件的行数。

这里我们使用wc -l验证也是没问题的。

cat /etc/passwd | wc -l

上面3个案例简单的使用了awk的命令 *** 作符。

虽然只是用到了几个简单的，但是其他同理，大家可以执行 *** 作。

下一篇：

欢迎大家给予宝贵的意见或者建议。

欢迎大家补充或者共享一些其他的方法。

感谢支持。

---