awk的详解 基本用法和高级用法

1 awk 用途 报告生成工具，主要在处理文本方面特别强大，也是一个独立的程序语言，与grep sed 构成处理文本工具的三剑客。

同gawk 都是 GNU组织开发的开源工具

2 awk的工作原理，已每个记录进行每个域的分离，如 常常是以每一行作为一个记录，空白作为默认的与分隔符，然后以内置变量对每个域进行赋予变量！

3 语法结构

awk option scrips file

或这 echo “ ” ｜ awk option scripts 管道使用

option 选项主要有

-F 指定分隔符，而不以默认的空白（空格符或者制表符）

-v 指定变量

-f 指定脚本的文件名，即将脚本放入一个文件当中，避免awk书写太长，影响视觉，和重复编写

scripts 是对 处理的文本进行的操作

awk程序用一对花括号来定义，必须将脚本命令放到两个花括号当中。花括号必须用单引号引起来

如 awk -F : '{print $1,$4}' /etc/passwd

4 awk基本学会技能

1、使用数据字段变量 $1 ,$2,....$n

2、在脚本中使用多个命令 使用 ;

3、从文件中读取脚本程序 使用 -f

4、在处理数据前运行的某些脚本内容 BEGIN

5、在处理数据后运行的某些脚本内容 END

5 简单用法事例讲解

实例一: 初识awk

[root@shiyan ~]# echo "how are you" | awk '{print $1,"\t",$3}'

how you

讲解 awk 输入流how are are 文本进行处理，首先 以空白进行分割字段域（filed） 然后用内置变量进行赋值

内置变量

$1 等于第一段域 实例中即 为how

$2 等于第二段域 实例中即 为 are

$3 等于第三段域 实例中即 为 you

如果还有段域 则依次类推 $4 ...$n

最后$0 等于整个记录，即整行文本 how are you

此处没有使用 option，使用默认的 空白 进行分割

scripts 为print $1,"\t",$3 打印第一个字段 和一个 制表符 和第三个字段

实例二：提取/data 分区的使用率

[root@shiyan ~]# df -h | grep "/data"

/dev/sda7 97G 1.2G 91G 2% /data

[root@shiyan ~]# df -h | grep "/data" | awk -F '[ \t%]+' '{print $5}'

2

解释 一步完成了对/data 使用率的提取 使用率为2 ，-F 后面的指定分隔符时支持正则表达式的，此处为可以一空白 制表符 % 作为分隔符，且可以是N 个

上面也可以用如下进行，但显得不够专业，使用了两次awk

[root@shiyan ~]# df -h | grep "/data" | awk '{print $5}' | awk -F '%' '{print $1}'

2

实例三 -f 的用法

[root@shiyan awk]# awk -F : '{test=" home directory is "; print $1,test, $6}' /etc/passwd

-f 的实现办法

1 首先将 scripts 部分写入一个文件当中

[root@shiyan awk]# cat awkfile

{

test="home directory is"

print $1, test, $6

}

[root@shiyan awk]# awk -F : -f awkfile /etc/passwd

root home directory is /root

bin home directory is /bin

实现的效果一样，有时时非常有必要将处理脚本放入一个特定的文件中的，test="home directory is" 时test变量的赋值

实例四 -v选项的用法

[root@shiyan awk]# awk -F : -v test="home directory is" '{ print $1, test, $6}' /etc/passwd

结果同上实例，-v 指定对test 变量赋值

实例五: BEGIN在处理数据前运行某些脚本

如：

[root@shiyan awk]# awk -F : 'BEGIN {print "User","--------------","Shell"}{ print $1,"\t\t", $7}' /etc/passwd

解释：BEGIN关键字会执行一次指定的脚本段，想要处理数据的脚本段在第二个程序中定义{ print $1,"\t\t", $7}

结果: 加上了 User ---------Sheel 的抬头

[root@shiyan awk]# awk -F : 'BEGIN {print "User","--------------","Shell"}{ print $1,"\t\t", $7}' /etc/passwd

User -------------- Shell

root /bin/bash

bin /sbin/nologin

.....

实例六: END

[root@shiyan awk]# awk -F : 'BEGIN {print "User","--------------","Shell"}{ print $1,"\t\t", $7}END {print "The is last Line"}' /etc/passwd

结束 在所有操作完成之后，执行 END关键字定义的脚本段 END {print "The is last Line"}

注意: 两段或者三段脚本命令 在awk上会被当成一个文本字符串，所以必须要加上一个 单引号

awk的高级用法即体现程序语言的用法请参考一下文章