引言：

在Linux/UNIX 系统中包含很多种类的文本处理器或文本编辑器,其中grep，sed，awk是Shell 编程中经常用到的文本处理工具，被称之为Shell编程三剑客

一.awk概述

1.1awk介绍

AWK是一个强大的文本分析工具。它是专门为文本处理设计的编程语言，也是行处理软件，通常用于扫描、过滤、统计汇总工作；数据可以来自标准输入也可以是管道或文件

1.2工作原理

逐行读取文本，默认以空格或tab键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令

awk执行结果可以通过print的功能将字段数据打印显示。在使用awk命令的过程中,可以使用逻辑操作符"&&“表示"与”、“|表示"或”、"!“表示非” ;还可以进行简单的数学运算，如+、一、*、/、号、^分别表示加、减、乘、除、取余和乘方。

1.3awk命令格式

基本命令格式:

awk  选项  模式或条件{操作}     文件1   文件2...
awk  -f  脚本文件  文件1 文件2 ..

二.awk常规用法

2.1指定分隔符

常用命令操作：

awk -F +分隔符 ‘{print 参数位置}’ +文件名

2.2指定多个分隔符

-F指定分隔符，那么有的时候我们需要指定多个分隔符

awk -F[abc] '{print 位置参数}' +文件  #中括号内可以指定多个分隔符

2.3awk常用位置变量

$1：代表第一列
$2：代表第二列以此类推
$0：代表整行
NF：一行的列数
NR：行数

2.4awk指定行

当我们使用awk时，可能我们只需要文本中的某一行内的一个字段，该如何索取？

awk -F: 'NR==2{print $n}' +文件   #指定处理第二行内容并输出第N列

或

awk -F: '/关键词/{print $n}' +文件 #指定包含关键词的行，并输出第N列

使用awk获取本机IP地址，有时awk比使用grep更加方便

ifconfig en0|awk '/netmask/{print $2}'

ifconfig en0|grep netmask |awk '{print $2}'

使用awk获取网卡流量信息

ifconfig ens33|awk '/RX packets/{print $5}'

使用awk获取硬盘使用情况

df -h|awk 'NR==6{print $4}'

2.5模糊匹配

awk -F: '$1~/root/' passwd  #$1~/关键词/第一列包含关键词

awk -F: '$1 !~ /root/' passwd  #！取反，第一列不包含关键词的行

三.awk内的运算符

3.1数值比较

==     等于
!=     不等于  
<=     小于或等于  
>=     大于或等于
>      大于  
<      小于       
1
2
3
4
5

awk中的内置变量NR表示行数

3.2字符比较

字符比较与模糊匹配不同

3.3逻辑运算

awk命令支持逻辑操作符" &&“表示"与”、“||表示"或”、"!“表示非”

四.BEGIN与END

BEGIN和END的作用是给程序赋予初始状态和在程序结束之后执行一些扫尾的工作。

任何在BEGIN之后列出的操作（在{}内）将在awk开始扫描输入之前执行，而END之后列出的操作将在扫描完全部的输入之后执行。因此，通常使用BEGIN来显示变量和预置（初始化）变量，使用END来输出最终结果。

awk命令执行流程：

常用内置变量：

FS：输入字段的分隔符，默认是空格
OFS：输出字段的分隔符，默认是空格
FNR：读取文件的行号，从1开始，新的文件也重1开始计数
RS：输入行分隔符，默认为换行符
ORS：输出行分隔符，默认也是为换行符

4.1 BEGIN

FS=“”指定分隔符，与-F 选项相同

OFS=“”输出字段时，相邻字段以什么做分割

FNR读取文件时的行号，当读取多个文件时，将重新计数

RS:输入时指定以什么为换行符

ORS：把打进的内容合并成一行，输出时以指定的分割符为分割两行的内容

4.2 END

END一般用来做汇总操作，仅在读取完数据记录之后执行一次

五.总结

1.相比grep与sed，awk的功能明显更加的强大，我们可以获取文本中我们所想要的相关内容

2.awk支持数值运算符，逻辑操作

3.awk的内置变量，通过BEGIN模块，在分析文本数据时更加的方便

4.注意在使用print打印多个字段时，建议使用逗号分割，awk后的命令使用’'单分号。

Linux文本三剑客--awk