首页 > 代码库 > grep中使用正则表达式
grep中使用正则表达式
1. intruduction
GREP 全称Global search Regular Expression and Print out the line,用于搜索文件并将匹配的行打印出来,它可以使用regex 来搜索文本。它在一个或多个文件中搜索字符串pattern。如果pattern包括空格，则必须被引用(建议引用所有内容)，pattern后的所有字符串被看作文件名。搜索的结果被送到标准输出，不影响原文件内容。
grep可用于shell脚本，因为grep通过返回一个状态值来说明搜索的状态，如果模板搜索成功，则返回0，如果搜索不成功，则返回1，如果搜索的文件不存在，则返回2。我们利用这些返回值就可进行一些自动化的文本处理工作
sysopsis
grep [option] [pattern] [file... ]
pattern 实际上是正则表达式regex, 可用单引号‘ ‘ 将pattern括起来以避免shell通配的影响。
2. option
-# 同时显示匹配行上下的#行，如：grep -2 pattern filename同时显示匹配行的上下2行。选项-C的简写方式
-C grep -C 5 foo file 显示foo及前后各5行
-B before grep -B 5 foo file 显示foo及前5行
-A after grep -A 5 foo file 显示foo及后5行
-i，--ignore-case 忽略大小写差别。
-n，--line-number 在匹配的行前面打印行号,需要修改相应配置文件的内容时相当有用
-c,--count 只打印匹配的行数，不显示匹配的内容。
-v，--revert-match 反检索，只显示不匹配的行。
-V --version
-q，--quiet 取消显示，只返回退出状态。0则表示找到了匹配的行；找不到返回1；搜索的文件不存在返回2
-w 只匹配整个单词
-r/ -R/ -d --recursive #此参数的效果和指定“-d recurse”参数相同,遍历目录下的所有文件，
-L：输出时只显示不包含匹配项的文件名，通常与-r选项连用来查找带指定内容的文件。
-l：输出时只显示包含匹配项的文件名。
-h --no-filename #在显示符合样式的那一列之前，不标示该列所属的文件名称。
-H --with-filename #在显示符合样式的那一列之前，表示该列所属的文件名称。(默认方式)
-s，--silent 不显示关于不存在或者无法读取文件的错误信息。
-o：输出时每行只显示匹配项内容
-E 相当于egrep，支持扩展的正则表达式
-F 相当于fgrep
--color 高亮显示匹配项内容,如经常使用的命令别名alias grep=‘grep --color=auto‘
3. grep 中应用正则表达式
Linux中的命令grep, find, sed, awk 等支持regex
正则表达式分为基本正则表达式(grep -e)和扩展正则表达式(grep -E)。下面分别简单总结一下。
基本正则表达式base-regex
元数据 | 意义和范例 |
^word | 搜寻以word开头的行。 grep -vn ‘^#’ regular.txt #过滤掉以#开头的行。 |
word$ | 搜寻以word结束的行 grep -n ‘.$’ regular.txt， |
^$ | 匹配空行 |
\ | 转义字符，忽略正则表达式中特殊字符的原有含义 grep -n ‘\$” regular.txt 搜索包含$的行。 |
. | 匹配任意一个字符。 grep -n ‘e.e’ regular.txt #可以匹配eee，eae，eve等，但不匹配ee |
* | 匹配任意字符串，长度可为0。 grep -n ‘go*gle’ regular.txt #可以匹配glgle,gogle,google..... |
.* | 匹配所有字符 |
[list] | 匹配一系列字符中的一个。 grep -n ‘g[lf]’ regular.txt 可以匹配gl,gf |
[n1-n2] | 匹配一个字符范围中的一个字符。 grep -n ‘[0-9]’ regular.txt #匹配数字字符 grep -n ‘[a-z]‘ regular.txt #匹配a-z中的任意一个字符 更多示例[a-z],[0-9],[A-Z],[a-zA-Z0-9] |
[^list] | 匹配字符集以外的字符 例如：grep –n ‘[^o]‘ regular.txt 匹配非o字符 |
\<word | 匹配以work开头的单词。 grep -n ‘\<g’ regular.txt #匹配以g开头的单词 |
word\> | 匹配以word结尾的单词 grep -n ‘tion\>’ regular.txt #匹配以tion结尾的单词 |
\{n,m\} | 匹配前面的字符重复次数在n到m之间，包括n和m。 grep -n ‘go\{2,3\}gle’ regular.txt #可以匹配google, gooogle grep 要对｛｝转义 |
\{n\} | 匹配前面的字符重复n次。 |
\{n,\} | 匹配前面的字符n次或n次以上。 |
扩展正则表达式
grep一般情况下支持基本正则表达式，可以通过参数-E支持扩展正则表达式，另外grep单独提供了一个扩展命令叫做egrep用来支持扩展正则表达式，这条命令和grep -E等价。虽然一般情况下，基本正则表达式就够用了。特殊情况下，复杂的扩展表达式，可以简化字符串的匹配。
扩展正则表达式就是在基本正则表达式的基础上，增加了一些元字符。
元数据 | 意义和范例 |
+ | 重复前面字符1到多次。 grep -nE go+d’ regular.txt , 等价于 grep -n ‘go\{1,\}‘ regular.txt 匹配god，good，goood等等字符串 |
? | 匹配0或1次前面的字符 grep -nE ‘go?d’ regular.txt 等价于grep -n ‘go\{0,1\}d‘ regular.txt 匹配gd，god |
| | 或（or）的方式匹配多个字串 df -h | grep -nE ‘/var$|/opt/IBM/db2|/tmp$|/var$‘ 查看指定的多个文件系统的信息 |
() | 匹配整个括号内的字符串，原来都是匹配单个字符 grep -nE ‘g(oo|la)’ regular.txt 匹配good或者glad |
4. 如何对grep中的pattern加引号
事实上, 对字符串的解析是由shell完成再传递给grep,所以参考shell的特殊字符,以正确使用引号来确保表达正确，在此仍作简单说明。
‘ ‘ 单引号，字符串保持原样输出
" " 双引号，字符串中的` ` ,$, \ 等特殊字符会被shell解释替换后，再传递给grep
对普通的字符串（没有特殊字符和空格的字符串）也可以不加引号，直接搜索。
如
[ade@h test]$ grep -n $HOME regular.txt
2:/home/ade
[ade@h test]$ grep -n "$HOME" regular.txt
2:/home/ade
[ade@h test]$ grep -n ‘$HOME‘ regular.txt
5:$HOME
[ade@h test]$ grep -n "\$HOME" regular.txt
5:$HOME
所以除非刻意要使用shell替换功能，否则一直使用单引号来搜索你想要的内容是比较好的习惯。
5. eg
grep -v ‘^#‘ file.conf 过滤以#开头的行
grep -v ‘^$‘ 过滤空行
grep -c ‘HOME‘ file.conf 统计文件中HOME的个数
crontab -l | grep grep -v ‘^#‘
crontab -l | grep -n ‘* 0 /‘ 查找指定时间的任务
crontab -l | grep -B 2 "check_backup" 你仍需要对应cron job前的注释，以便清楚其含义。
grep -l ‘mdadm‘ /var/log/* 搜索包含特定内容的日志文件
grep -2 "initdefault" /etc/inittab 想看看匹配前后两行的内容
df -g | grep -nE ‘/var$|/opt/IBM/db2$|/tmp$|/var$‘ 仅查询特定分区人信息。
ls -1 | grep ‘t[abc]ab‘ 传递给grep的字符串为t[abc]ab. 当然也可以直接让shell来解释来找到想要的文件ls -1 t[abc]ab 。所以使用正则表达时要清楚什么样的字符串传递给哪一个程序处理。
grep ‘\\‘ regular.txt 搜索文件中的\而不是\\.
related
egrep 相当于grep -E
fgrep 想当于grep -F
本文出自 “Adelphos” 博客，请务必保留此出处http://adelphos.blog.51cto.com/2363901/1584586
grep中使用正则表达式