awk用法小结

1. next多行合并

(cat << EOF

person1:

a:1

b:2

c:3

person2:

a:12

b:23

c:11

EOF
)  | awk -F":"  '/^person/{tmp=$1;next;}{print tmp FS $2}'

输入出

person1: 1 2 3

persion2:12 23 11

注意:cat在多行输出时,管道需要用括号括起来.
2).读取多个文件

2个文件时,
当awk读取的文件只有两个的时候，比较常用的有两种方法：(1)一种是

awk 'NR==FNR{...}NR>FNR{...}'  file1 file2
或

awk 'NR==FNR{...}NR!=FNR{...}' file1 file2
另一种是awk 'NR==FNR{...;next}{...}' file1 file2
多个文件时,

1). ARGIND        # 当前被处理参数标志

awk 'ARGIND==1{...}ARGIND==2{...}ARGIND==3{...}... ' file1 file2 file3 ...

2). ARGV            # 命令行参数数组

awk 'FILENAME==ARGV[1]{...}FILENAME==ARGV[2]{...}FILENAME==ARGV[3]{...}...'file1 file2 file3 ...

3). 把文件名直接加入判断

awk'FILENAME=="file1"{...}FILENAME=="file2"{...}FILENAME=="file3"{...}...'file1 file2 file3 ...
3.sub和gsub

gsub（r,s,t)  

sub(r,s,t)
都返回被替换的次数
t没有指定,默认是整个记录.区别是:gsub全部替换,sub只替换一次

echo "aaaaa" | awk 'sub("a","b")'

baaaa

echo "aaaaa" | awk 'gsub("a","b")'

bbbbb
4.awk只有一条命令时,可以不加{}
5.getline systerm colse用法

system(Command )

执行 Command 参数指定的命令，并返回退出状态。等同于system 子例程。

 awk 'BEGIN{while("cat/etc/passwd"|getline){print $0;};close("/etc/passwd");}'
awk 'BEGIN{while(getline < "/etc/passwd"){print$0;};close("/etc/passwd");}'
awk'BEGIN{b=system("ls -al");print b;}' 

b为0,执行ls
输出结果

6.时间函数

mktime( YYYY MM DD HH MM SS[ DST])	生成时间格式
strftime([format [, timestamp]])	格式化时间输出，将时间戳转为时间字符串  具体格式，见下表.
systime()

echo "abc 1407037650" | awk'$2=strftime("%y-%m-%d",$2)'

7.数组
多维数组，array[index1,index2,……]：SUBSEP是数组下标分割符，默认为“\034”。可以事先设定SUBSEP，也可以直接在SUBSEP的位置输入你要用的分隔符，如：

awk'BEGIN{SUBSEP=":";array["a","b"]=1;for(i inarray) print i}'

a:b

awk'BEGIN{array["a"":""b"]=1;for(i in array) printi}'

a:b

但，有些特殊情况需要避免，如:

awk'BEGIN{

SUBSEP=":"

array["a","b:c"]=1               #
下标为“a:b:c”

array["a:b","c"]=2               #下标同样是“a:b:c”

for (iin array) print i,array[i]}'

a:b:c2                                 #所以数组元素只有一个。
8.数据排序

1)内置函数

asort使用说明 

srcarrlen=asort[srcarr,dscarr] 默认返回值是：原数组长度，传入参数dscarr则将排序后数组赋值给dscarr. 

asort只对值进行了排序，因此丢掉原先键值。

asorti对键值进行排序（字符串类型），将生成新的数组放入：tA中。

2)发给外部程序

awk 'BEGIN{a[3]=3;a[4]=4;a[1]=1

for(i in a){

print i,a[i] }

}' | sort -k2
9.定义多个分隔符

awk定义多个分隔符

awk命令行选项 -F"[:|]" 
告诉awk |
和 : 都是字段分隔符

10.数据乱序

awk for(k in arr)输出乱序的原因是因为:内部用hash实现,没有规律,

awk 'BEGIN{a[3]=3;a[4]=4;a[1]=1

for(i in a){

print i,a[i] }

}'

4 4

1 1

3 3
可以将a[0]=3 a[1]=4 a[2]=1的形式保存在数组中.