正则表达式在每种语言中都会有,功能就是匹配符合你预期要求的字符串。

Shell正则表达式有两种:

基础正则表达式:BRE(basic regular express)

扩展正则表达式:ERE(extend regular express),扩展的表达式有+、?、|和()

下面是一些常用的正则表达式符号,我们先拿grep工具举例说明。

符号

描述

示例

.匹配除换行符(\n)之外的任意单个字符

匹配123:

echo -e "123\n456" |grep -E '1.3'

^匹配前面字符串开头

匹配以abc开头的行:

echo -e "abc\nxyz" |grep -E ^abc

$匹配前面字符串结尾

匹配以xyz结尾的行:

echo -e "abc\nxyz" |grep -E xyz$

*匹配前一个字符零个或多个

匹配x、xo和xoo:

echo -e "x\nxo\nxoo\no\noo" |grep "xo*"

x是必须的,批量了0零个或多个

+匹配前面字符1个或多个

匹配abc和abcc:

echo -e "abc\nabcc\nadd" |grep -E 'ab+'

这样是匹配单个数字:echo "113" |grep -E -o '[0-9]'

连续匹配多个数字:echo "113" |grep -E -o '[0-9]+'

匹配前面字符0个或1个

匹配ac或abc:

echo -e "ac\nabc\nadd" |grep -E 'a?c'

[ ]匹配中括号之中的任意一个字符

匹配a或c:

echo -e "a\nb\nc" |grep -E '[ac]'

[ .-.]匹配中括号中范围内的任意一个字符

匹配所有字母:

echo -e "a\nb\nc" |grep -E '[a-z]'

[^]匹配[^字符]之外的任意一个字符

匹配a或b:

echo -e "a\nb\nc" |grep -E '[^c-z]'

匹配末尾数字:echo "abc:cde;123" |grep -E '[^;]+$'

{n}或{n,}匹配花括号前面字符至少n个字符

匹配abc字符串(至少三个字符以上字符串):

echo -e "a\nabc\nc" |grep -E '[a-z]{3}' 

{n,m}匹配花括号前面字符至少n个字符,最多m个字符

匹配12和123(不加边界符会匹配单个字符):

echo -e "1\n12\n123\n1234" |grep -E -w -o '[0-9]{2,3}'

\<边界符,匹配字符串开始

匹配开始是123和1234:

echo -e "1\n12\n123\n1234" |grep -E -w '\<123'

\>边界符,匹配字符串结束

匹配结束是1234:

echo -e "1\n12\n123\n1234" |grep -E '4\>'

( )

单元或组合:将小括号里面作为一个组合

分组:匹配小括号中正则表达式或字符。\n反向引用,n是数字,从1开始编号,表示引用第n个分组匹配的内容

单元:匹配123a字符串

echo "123abc" |grep -E -o '([0-9a-z]){4}'

分组:匹配11

echo "113abc" |grep -E -o '(1)\1'

匹配出现xo出现零次或多次:

echo -e "x\nxo\nxoo\no\noo" |egrep "(xo)*"

|匹配竖杠两边的任意一个

匹配12和123:

echo -e "1\n12\n123\n1234" |grep -E '12\>|123\>'

\转义符,将特殊符号转成原有意义1.2,匹配1.2:1\.2,否则112也会匹配到


Posix字符

描述

[:alnum:]等效[a-zA-Z0-9]
[:alpha:]等效[a-zA-Z]
[:lower:]等效[a-z]
[:upper:]等效[A-Z]
[:digit:]等效[0-9]
[:space:]匹配任意空白字符,等效[\t\n\r\f\v]
[:graph:]非空白字符
[:blank:]空格与定位字符
[:cntrl:]控制字符
[:print:]可显示的字符
[:punct:]标点符号字符
[:xdigit:]十六进制


示例:

echo -e "1\n12\n123\n1234a" |grep '[[:digit:]]'


博客地址:http://lizhenliang.blog.51cto.com

QQ群:Shell/Python运维开发群 323779636


在Shell下使用这些正则表达式处理文本最多的命令有下面几个工具:


命令

描述

grep默认不支持扩展表达式,加-E选项开启ERE。如果不加-E使用花括号要加转义符\{\}
egrep支持基础和扩展表达式
awk支持egrep所有的正则表达式
sed默认不支持扩展表达式,加-r选项开启ERE。如果不加-r使用花括号要加转义符\{\}


支持的特殊字符

描述

\w匹配任意数字和字母,等效[a-zA-Z0-9_]
\W与\w相反,等效[^a-zA-Z0-9_]
\b匹配字符串开始或结束,等效\<和\>
\s匹配任意的空白字符
\S匹配非空白字符


空白符

描述

\n换行符
\r回车符
\t水平制表符
\v垂直制表符
\0空值符
\b退后一格


下一章节具体讲解grep、sed和awk用法,想要提升三剑客功底的可以看看!