Awk简介

Awk是一个功能强大的编辑工具，用于在Linux/UNIX 下对文本和数据进行处理。
数据可以来自一个或多个文件，也可以为其他命令的输出，常作为脚本来使用。
在执行操作时，Awk逐行读取文本，默认以空格为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，对比该行是否与给定的模式相匹配，并按模式或者条件执行编辑命令，也可从脚本中调用编辑指令过滤输出相应内容。
sed命令常用于一整行的处理，而awk比较倾向于将一行分成多个“字段”然后再进行处理。awk信息的读入也是逐行读取的，执行结果可以通过print的功能将字段数据打印显示。在使用awk命令的过程中,可以使用逻辑操作符“&&”表示“与”、“||”表示“或”、“!”表示“非”；还可以进行简单的数学运算，如+、-、*、/、%、^分别表示加、减、乘、除、取余和乘方。

Awk语法格式

第一种：awk 【选项】 ‘模式或条件 {编辑指令}’ 文件1 文件2
第二种：awk -f 脚本文件文件1 文件2
awk -F"分隔符" ‘条件 {print $0, $2,$ NF}’ 文件。。。
条件：按行号 NR==xx,(>,>=,<,<=,) 也可以使用（&& 与， || 或，！非。）
按内容 /字符串/ 或 /正则表达式/ 或$n==”字符串“，
- !=：不等于
- ~：包括
- !~：不包括
- <，<=，>，>=，!=，分别为小于，小于等于，大于，大于等于，不等于。

在Awk语句中，模式部分决定何时对数据进行操作，若省略则后续动作时刻保持执行状态，模式可以为条件语句、复合语句或正则表达式等。每条编辑指令可以包含多条语句，多条语句之间要使用分号或者空格分隔的的多个{}区域。常用选项 -F 定义字段分隔符，默认以空格或者制表符作为分隔符。

Awk常见内置变量

Awk提供了很多内置变量，经常用于从处理文本。

变量	描述
FS	指定每行文本的字段分隔符
NF	当前处理的行的字段个数
NR	当前处理的行的行号（序数）
$0	当前处理的行的整行内容
$n	当前处理行的第n个字段（第n列）
FILENAME	被处理的文件名
RS	行分隔符。awk从文件上读取资料时,将根据RS的定义把资料切割成许多条记录,而awk一次仅读入一条记录,以进行处理。预设值是’\n’

Awk实例演示

按行输出文本

awk ’{print $0}‘ 或 awk ‘{print}’ ##全行输出
在这里插入图片描述
awk ‘NR==a{print}’##输出指定行a
awk 'NR=='a,NR==b{print} ##指定输出行a到行b之间的所有行
awk ‘NR==a || NR==b{print}’ ##指定输出行a和行b

awk ‘(NR%2)==1{print}’ ##输出所有奇数行的内容
awk ‘(NR%2)==0{print}’ ##输出所有偶数行的内容
在这里插入图片描述
awk ‘/字符串/{print}’ ##输出所有包含字符串的行
awk ‘/正则表达式/{print}’ ##输出所有正则匹配到的行

BEGIN模式和END模式

BEGIN模式：在处理指定文本之前，需要先执行BEGIN模式中指定的动作；awk在处理指定的文本，之后再执行END模式中指定的动作，END{}语句块中，往往会放入打印结果等语句。
例：
利用awk统计passwd文件中以/bin/bash结尾的行数。
awk ‘BEGIN {a=0};//bin/bash$/ {a++};END {print a}’ /etc/passwd
在这里插入图片描述