使用单个字符串来描述、匹配一系列符合某个句法规则的字符串,这就是正则表达式。Linux 的 grep 命令是一种查找过滤工具,用于在文件中查找指定模式的字符串,其支持正则表达式。
通配符和正则表达式的区别
在谈正则表达式之前,首先说一下通配符和正则表达式的区别,二者容易混淆。曾经我把通配符认为就是正则表达式,在本该使用统配符的地方意图使用正则表达式,由于没能达到想要的结果,这才意识到不对劲。通配符一般用于linux的shell命令中,例如:
grep hello *
这表示在当前目录下的所有文件中查找含“hello”字符串的文件的行。下面列出一些通配符的含义:
[a-z]或[12]:匹配方括号中指定范围内的单个字符或方括号列出的其中一个字符。
[!9]:不匹配方括号中所列字符或指定范围内的单个字符。
*:匹配0个字符或多个字符。
?:匹配任何单个字符,且不能为空字符。
正则表达式分类
1、基本的正则表达式(Basic Regular Expression 又叫 Basic RegEx 简称 BREs)
2、扩展的正则表达式(Extended Regular Expression 又叫 Extended RegEx 简称 EREs)
3、Perl 的正则表达式(Perl Regular Expression 又叫 Perl RegEx 简称 PREs)
其实我们在大多数高级编程语言中所使用的正则表达式都源自Perl。实际上,正则表达式从Perl衍生出一个显赫的流派,叫做PCRE(Perl Compatible Regular Expression)。其他高级语言大多基于此修改或者扩展。而 Unix/Linux 下的工具大多采用POSIX规范,同时,POSIX规范又可分为两种流派,即 BREs 和 EREs。
正则表达式 Extended 规范
1、字符类 . 匹配任意一个字符
[] 匹配括号中的任意一个字符
\- 用在[]中,表示字符范围
^ 如果位于[]的开头,则匹配除去括号中字符之外的一切字符
[[:xxx:]] grep 工具预定义的一些命名字符类,例如 [[:alpha:]] 匹配一个字母,[[:digit:]] 匹配一个数字
2、数量限定符 ? 紧跟在它前面的单元匹配零次或一次
\+ 紧跟在它前面的单元匹配一次或多次
\* 紧跟在它前面的单元匹配零次或多次
{N} 紧跟在它前面的单元应精确匹配N次 [1-9][0-9]{2} 匹配从100 到999 的整数
{N,} 紧跟在它前面的单元至少要匹配n次
{,M} 紧跟在它前面的单元至多匹配m次
{N,M} 紧跟在它前面的单元至少匹配n次,至多匹配m次
3、位置限定符 ^ 匹配行首的位置
$ 匹配行末的位置
\
\> 匹配单词结尾的位置
\b 匹配单词开头或结尾的位置
\B 匹配非单词开头和结尾的位置
4、其他特殊字符 \ 转义字符,普通字符转义为特殊字符,特殊字符转义为普通字符
() 将正则表达式的一部分括起来组成一个单元,可以对整个单元使用数量限定符
| 连接两个表达式,表示或的关系
以上介绍的是grep正则表达式的 Extended 规范,Basic 规范也有这些语法,只是字符 ?+{}|() 应解释为普通字符,要表示上述特殊含义则需要加 \ 转义。如果用 grep 而不是 egrep,并且不加 -E 参数,则应该遵照Basic 规范来写正则表达式。当然,如果是 grep -F,则只搜索固定字符串而不搜索正则表达式模式,不会按正则表达式语法解析后边的参数,grep -F 等价于 fgrep。
最后需要强调的一点是,grep 找的是包含某一模式的行,而不是完全匹配某一模式的行。也就是说,grep 的正则表达式匹配是以行为单位的。
一些示例
搜索以小写字母开头的行
grep -n '^[a-z]' temp.txt
-n 参数表示输出时显示匹配的行号
搜索开头不是英文字母的行
grep -n '^[^a-zA-Z]' temp.txt
搜索空行
grep -n '^$' temp.txt
搜索以 g 开头和结尾的字符串在的行
grep -n 'g.*g' temp.txt
搜索g开头和结尾,中间是至少一个o的字符串
grep -n 'goo*g' temp.txt