首页 > 代码库 > awk的模式和动作

awk的模式和动作

awk的模式和动作

【语法结构】

awk -F ‘Pattern1{Action1};Pattern2{Action2}‘ input-file

awk -F ‘{Action}‘ input-file

① -F 为字段分隔符。若不指定,默认会使用空格作为分隔符。 

② /Pattern/{Action}需要用单引号引起来,防止shell作解释。 

③ /Pattern/是可选的。如果不指定,awk 将处理输入文件中的所有记录。如果指定一个模式,awk 则只处理匹配指定的模式的记录。 

④ {Action}  awk 命令,可以是单个命令,也可以多个命令。整个 Action(包括里面的所有命令)都必须放在{  }之间。 

⑤ Input-file 要处理的目标文件

⑥ Action必须被{}包裹,没有被{}包裹的就是Pattern

Pattern

awk 可接受许多不同型态的 Pattern. 一般常使用 "关系表达式"(Relational expression) 来当成 Patternawk 通过判断 Pattern 的值来决定是否执行其后所对应的Actions。以下是几种常见的Pattern

 

BEGIN

BEGIN  awk 的保留字是一种特殊的 Pattern.

BEGIN 成立(值为true)的时候是: "awk 程序一开始执行尚未读取任何数据之前." 所以在 BEGIN { Actions } 语法中 Actions 部份仅于程序一开始执行时被执行一次 awk 从数据文件读入数据行后, BEGIN 便不再成立故不论有多少数据行 Actions 部份仅被执行一次.一般常把 "与数据文件内容无关 "只需执行ㄧ次的部分置于该Actions( BEGIN  Pattern).

例如:

BEGIN {

FS = "[ \t:]" # 于程序一开始时改变awk切割字段的方式

RS = "" # 于程序一开始时改变awk分隔数据行的方式

count = 100 # 设定变量 count 的起始值

print " This is a title line " # 印出一行 title

}

....... # 其它 Pattern { Actions } .....

有些awk程序甚至"不需要读入任何数据行". 遇到这情况可把整个程序置于以 BEGIN  Pattern Actions .

例如 :

BEGIN { print " Hello ! the Word ! " }

注意 :执行该类仅含 BEGIN { Actions } 的程序时, awk 并不会开启任何数据文件进行处理.

 

END

END  awk 的保留字是另一种特殊的 Pattern.

END 成立(其值为true)的时机与 BEGIN 恰好相反:"awk 处理完所有数据即将离开程序时"平常读入数据行时, END并不成立故其对应的 Actions 并不被执行唯有当awk读完所有数据时 Actions 才会被执行

注意 : 不管数据行有多少 Actions 仅被执行一次.

 

关系表达式

使用像 " A 关系运算符 B" 的表达式当成 Pattern.

 A  B 存在所指定的关系(Relation) Pattern 就算成立(true).

例如 :

length($0) <= 80 { print $0 }

上式中 length($0)<= 80 是一个 Pattern,  $0(数据行)之长度小于等于80时该 Pattern 之值为true, 将执行其后的 Action (打印该数据行).

 

awk 中提供下列 关系运算符(Relation Operator)

运算符 含意

大于

小于

>= 大于或等于

<= 小于或等于

== 等于

!= 不等于

~ match

!~ not match

上列关系运算符除~(match)!~(not match)外与 C 语言中之含意一致.

~(match) !~(match)  awk 之含意简述如下 :

 A 为一字符串, B 为一正则表达式.

A ~B 判断 字符串中是否 包含 能匹配(match)B式样的子字符串.

A !~B 判断 字符串中是否 未包含 能匹配(match)B式样的子字符串.

例如 :

$0 ~ /program[0-9]+\.c/ { print $0 }

$0 ~ /program[0-9]+\.c/ 整个是一个 Pattern, 用来判断$0(数据行)中是否含有可 match /program[0-9]+\.c/ 的子字符串$0 中含有该类字符串则执行 print (打印该行数据).

Pattern 中被用来比对的字符串为$0 (如本例), 可仅以正则表达式部分表示整个Pattern.故本例的 Pattern 部分$0 ~/program[0-9]+\.c/ 可仅用/program[0-9]+\.c/表之

 

常量

常量有两种类型,字符串常量和数值常量.字符串常量必须用引号括起来,数值常量不需要,如数值0和字符串"0"是不一样的.

数值常量中,0代表假,0的数值常量代表真

字符串常量中,空字符串为假,非空字符串为真

例如

1{print}

上式利用数值常量1作为一个逻辑值.

该式中数值常量为10为真

 

Pattern

如果awk的语句中省略了pattern,即pattern为空,则代表永远为真,并执行后面紧跟的action.如果action省略则默认actionprint

例如

{name=1}5

上式还原完整的格式为 pattern {name=1}5 {print}.

 

正则表达式

直接使用正则表达式当成 Pattern; 此为 $0 ~ 正则表达式 的简写.

 Pattern 用以判断 $0(数据行中是否含有匹配该正则表达式的子字符串若含有则成立(true) 执行其对应的 Actions.

例如 :

/^[0-9]*$/ { print "This line is a integer !" }

 $0 ~/^[0-9]*$/ { print "This line is a integer !" } 相同

 

混合 Pattern

之前所介绍的各种 Patterns, 其计算后结果为一逻辑值(True or False).awk 中逻辑值彼此间可通过&&(and), ||(or),  !(not) 结合成一个新的逻辑值.故不同 Patterns 彼此可通过上述结合符号来结合成一个新的 Pattern. 如此可进行复杂的条件判断.

  :

FNR >= 23 && FNR <= 28 { print "     " $0 }

上式利用&& (and) 将两个 Pattern 求值的结果合并成一个逻辑值.

该式将数据文件中 23  28 向右移5(先输出5个空白字符)后输出.

/2/0{print}

上式利用正则表达式和数值常量0结合的结果合并为一个逻辑值.

该式中非空字符串永远为真,不管正则结果是真还是假,结果永远为真,打印文件所有行,等同于1{print}简写为{print}

 

Pattern1 , Pattern2

遇到这种 Pattern, awk 会设定一个区间的开关,即switch(flag).

awk读入的数据行使得 Pattern1 成立时, awk 会打开(turn on) switch.

awk读入的数据行使得 Pattern2 成立时, awk 会关上(turn off)这个 switch.

 Pattern 成立的条件是 :

当这个 switch 被打开(turn on) (包括 Pattern1,  Pattern2 为真的情况)

  :

FNR >= 23 && FNR <= 28 { print "     " $0 }

可改写为

FNR == 23 , FNR == 28 { print "     " $0 }

  :

 FNR >= 23 , awk  turn on 这个 switch; 因为随着数据行的读入, awk不停的累加 FNR.  FNR = 28 , Pattern2 (FNR == 28) 便成立这时 awk 会关闭 switch.

 switch 打开的期间, awk 会执行  print "     " $0

例如:

‘/2/,/2/

其实等价于

/2/

说明:

当当前读入的行即$0中匹配到2这个字符,awkturn on这个switch;从当前读入的行开始继续向下读,直到读入的行中匹配到2这个字符,awkturn off这个switch.

例如:

‘/1/,/2/

说明:

当当前读入的行匹配到1这个字符,awkturn on这个switch,从当前读入的行开始继续向下读,直到读入的行匹配到2这个字符,awkturn off这个switch.

Actions

Actions 是由下列指令(statement)所组成 :

· 表达式 ( function calls, assignments..)

· print 表达式列表

· printf( 格式化字符串表达式列表)

· if( 表达式 ) 语句 [else 语句]

· while( 表达式 ) 语句

· do 语句 while( 表达式)

· for( 表达式表达式表达式语句

· for( variable in array) 语句

· delete

· break

· continue

· next

· exit [表达式]

· 语句

awk 中大部分指令与 C 语言中的用法一致此处仅介绍较为常用或容易混淆的指令的用法.


本文出自 “专注IT十八年” 博客,请务必保留此出处http://zhangjiajiang.blog.51cto.com/9701694/1843265

awk的模式和动作