首页 > 代码库 > shell数组和awk数组
shell数组和awk数组
awk终于能入门了,所以整理了该文章,内容大多来自网上。
一、bash支持一维数组(不支持多维数组),没有限定数组的大小。在shell中,用括号来表示数组,数组元素用空格符号分割开。类似于C语言,数组元素的下标由0开始编号。获取数组中的元素要利用下标,下标可以是整数或算术表达式,其值应大于或等于0
1. 定义数组 数组名array,元素a b c [root@localhost~]# array=(a b c) 2.获取所有元素 [root@localhost~]# echo ${array[*]} a b c [root@localhost~]# echo ${array[@]} a b c 3.获取数组的长度 [root@localhost~]# echo ${#array[*]} 3 4.通过下标0 1 2依次获取数组的每一个元素 [root@localhost~]# echo ${array[0]} a [root@localhost~]# echo ${array[1]} b [root@localhost~]# echo ${array[2]} c 5.获取部分数组 [root@localhost~]# echo ${array[*]:0:2} a b 6.删除第一个元素 [root@localhost~]# unset array[0] 7.删除整个数组 [root@localhost~]# unset array
小例子:
#!/bin/bash #删除指定目录下的文件 a=(/usr/local/tomcat/logs /home/user/tomcat/logs /usr/local/app/tomcat/logs) for i in "${a[@]}" do find "$i" -maxdepth 1 -type f -name "*.txt" ! -name "*.*" ! -mtime +30 -exec rm {} \; done
二、awk数组
awk的数组,一种关联数组(Associative Arrays),支持多维数组,下标可以是数字和字符串。因无需对数组名和元素提前声明,也无需指定元素个数 ,所以awk的数组使用非常灵活。
1.建立数组
array[index]=value 数组名array,下标index以及相应的值value
2.读取数组值
{for (item in array) print array[item]} # 输出的顺序是随机的 {for(i=1;i<=len;i++) print array[i]} # len 是数组的长度
3.多维数组,array[index1,index2,……]:SUBSEP是数组下标分割符。可以事先设定SUBSEP,也可以直接在SUBSEP的位置输入你要用的分隔符,如:
[root@localhost~]# awk ‘BEGIN{array["a","b"]=1;for(i in array) print i}‘ a b [root@localhost~]# awk ‘BEGIN{SUBSEP=":";array["a","b"]=1;for(i in array) print i}‘ a:b [root@localhost~]# awk ‘BEGIN{array["a"":""b"]=1;for(i in array) print i}‘ a:b
[root@localhost~]# cat file A 192.168.1.1 HTTP B 192.168.1.2 HTTP B 192.168.1.2 MYSQL C 192.168.1.1 MYSQL C 192.168.1.1 MQ D 192.168.1.4 NGINX [root@localhost~]# awk ‘{a[$1"-"$2]++}END{for(i in a)print a[i],i}‘ file [root@localhost~]# awk ‘{SUBSEP="-"}{a[$1,$2]++}END{for(i in a) print a[i],i}‘ file 2 B-192.168.1.2 1 D-192.168.1.4 2 C-192.168.1.1 1 A-192.168.1.1
4.删除数组或数组元素,使用delete函数
delete array #删除整个数组 delete array[item] #删除某个数组元素(item)
5.排序:awk中的asort函数可以实现对数组的值进行排序,不过排序之后的数组下标改为从1到数组的长度。在gawk 3.1.2以后的版本还提供了一个asorti函数,这个函数不是依据关联数组的值,而是依据关联数组的下标排序,即asorti(array)以后,仍会用数字(1到数组长度)来作为下标,但是array的数组值变为排序后的原来的下标,除非你指定另一个参数如:asorti(a,b)。
[root@localhost~]# echo ‘aa bb aa bb cc‘ |awk ‘{a[$0]++}END{l=asorti(a);for(i=1;i<=l;i++)print a[i]}‘ aa bb cc [root@localhost~]# echo ‘aa bb aa bb cc‘ |awk ‘{a[$0]++}END{l=asorti(a,b);for(i=1;i<=l;i++)print b[i],a[b[i]]}‘ aa 2 bb 2 cc 1
[root@localhost~]# echo "a 1 0 b 2 10 8 100" | awk ‘{a[$0]=$0} #建立数组a,下标为$0,赋值也为$0 END{ len=asort(a) #利用asort函数对数组a的值排序,同时获得数组长度len for(i=1;i<=len;i++) print i "\t"a[i] #打印 }‘ 1 0 2 1 3 2 4 8 5 10 6 100 7 a 8 b
6.去重
[root@localhost~]# cat file 1 2 1 3 4 5 6 [root@localhost~]# awk ‘a[$1]++‘ file 1 [root@localhost~]# awk ‘!a[$1]++‘ file 1 2 3 4 5 6
7.求和
[root@localhost~]# echo "aaa 1 aaa 1 ccc 1 aaa 1 bbb 1 ccc 1" |awk ‘{a[$1]+=$2}END{for(i in a) print i,a[i]}‘ aaa 3 bbb 1 ccc 2
8.通过split函数建立数组:数组的下标为从1开始的数字
split(s, a [, r]) # s:string, a:array name,[,r]:regular expression。
[root@localhost~]# echo ‘abcd‘ |awk ‘{len=split($0,a,"");for(i=1;i<=len;i++) print "a["i"] = " a[i];print "length = " len}‘ a[1] = a a[2] = b a[3] = c a[4] = d length = 4
求1月份相同名字和总和
[root@localhost~]# cat file Tom 2012-12-11 car 5 3000 John 2013-01-13 bike 4 1000 vivi 2013-01-18 car 4 2800 Tom 2013-01-20 car 3 2500 John 2013-01-28 bike 6 3500 [root@localhost~]# awk ‘{split($2,a,"-");if(a[2]==01){b[$1]+=$5}}END{for(i in b)print i,b[i]}‘ file vivi 2800 Tom 2500 John 4500
9.求平均数
[root@localhost~]# cat file /circlelistbytjid,耗时:25ms /circlelistbytjid,耗时:24ms /circlelistbytjid,耗时:21ms /circlelistbytjid,耗时:13ms /circlelistbytjid,耗时:25ms /circlelistbytjid,耗时:13ms /circlelistbytjid,耗时:23ms /circlelistbytjid,耗时:24ms [root@localhost~]# awk -F: ‘{a+=+$2}END{print a/NR}‘ file 21
10.求最大值
获取数字字段最大值
[root@localhost~]# cat file a b 1 c d 2 e f 3 g h 3 i j 2 [root@localhost~]# awk ‘BEGIN{max=0}{if($3>max)max=$3}END{print max}‘ file 3
打印第三字段最大行
[root@localhost~]# awk ‘BEGIN{max=0}{a[$0]=$3;if($3>max)max=$3}END{for(v in a)if(a[v]==max)print v}‘ file e f 3 g h 3
11.合并file1和file2,除去重复项
[root@localhost~]#cat file1 aaa bbb ccc ddd [root@localhost~]#cat file2 aaa eee ddd fff [root@localhost~]# awk ‘NR==FNR{a[$0]=1;print} #读取file1,建立数组a,下标为$0,并赋值为1,然后打印 NR>FNR{ #读取file2 if(!(a[$0])) {print } #如果file2 的$0不存在于数组a中,即不存在于file1,则打印。 }‘ file1 file2 aaa bbb ccc ddd eee fff
提取文件1中有,但文件2中没有:
[root@localhost~]# awk ‘NR==FNR{a[$0]=1} #读取file2,建立数组a,下标为$0,并赋值为1 NR>FNR{ #读取file1 if(!(a[$0])) {print } #如果file1 的$0不存在于数组a中,即不存在于file2,则打印。 }‘ file2 file1 bbb ccc
参考文章:http://bbs.chinaunix.net/thread-2312439-1-2.html
本文出自 “卡卡西” 博客,请务必保留此出处http://whnba.blog.51cto.com/1215711/1891360
shell数组和awk数组