grep系:

grep:Global search Regular Expression and Print out the line。

利用正则表达式进行全局搜索并将匹配到的行显示出来;



格式:

grep [OPTIONS] PATTERN [FILE...]

        grep [OPTIONS] [-e PATTERN | -f FILE] [FILE...]


        PATTERN:过滤匹配条件,是由没有特殊意义的文本字符或者是正则表达式元字符构成;


grep: 仅支持基本正则表达式元字符

egrep:可以支持扩展正则表达式元字符

fgrep:不支持任何形式的正则表达式元字符,将所有的字符都视为没有特殊意义的普通文本字符;


其中正则表达式与扩展正则表达式主要区别在于,正则表达式有的需要将反斜线写出来,而扩展正则表达式则不需要。



正则表达式的元字符:

基本的正则表达式元字符:BRE

    字符匹配类:

    ".":匹配任意的单个字符;

[root@localhost ~]# grep "a.b" a.txt
aaaaaabbbabcabccccc
abcabcabcbcacbaaaaa

(匹配a和b中间跟上任意字符的行,结果分别为abc,以及acb)



    "[]":匹配任意指定范围内的单个字符;

[root@localhost ~]# grep "[a]" a.txt
aaaaaabbbabcabccccc
abcabcabcbcacbaaaaa

(匹配只有a的行)


    [^]:匹配任意指定范围以外的单个字符;

[root@localhost ~]# grep "[^abc]" a.txt
ddddddddddddddddddk
ccccccccccccccccccl

(匹配除了字母abc以外的字符存在的行,结果是d,k以及l)



    下列所有的字符集都可以放置于[]之中,用于匹配字符集范围内的单个字符;

  1、[:lower:]:所有的小写字母

 [root@localhost ~]# grep "[[:lower:]]" a.txt
aaaaaaaaaaaaaaaaaaa
bbbbbbbbbbbbbbbbbbb

(匹配所有小写字母存在的行)




2、[:upper:]:所有的大写字母


[root@localhost ~]# grep "[[:upper:]]" a.txt
DDDDDDDDDDDDDCCCCCC
AAACACABCAAABCAAAAA

(匹配所有大写字母存在的行)


3、[:alpha:]:所有字母,大小写字母;


[root@localhost ~]# grep "[[:alpha:]]" a.txt
DDDDDDDDDDDDDCCCCCC
AAACACABCAAABCAAAAA
aaaaaaaaaaaaaaaaaaa
bbbbbbbbbbbbbbbbbbb

(匹配所有大小字母存在的行)



4、[:digit:]:所有单个的十进制数字;

[root@localhost ~]# grep "[[:digit:]]" a.txt
ccccccccccccccc2222

(匹配单个十进制数字存在的行)




5、[:alnum:]:所有的字母和十进制数字;


[root@localhost ~]# grep "[[:alnum:]]" a.txt
DDDDDDDDDDDDDCCCCCC
AAACACABCAAABCAAAAA
aaaaaaaaaaaaaaaaaaa
bbbbbbbbbbbbbbbbbbb
ccccccccccccccc2222

(匹配所有的字母和十进制数字)




6、[:punct:]:所有的符号


[root@localhost ~]# grep "[[:punct:]]" a.txt
$######@@@#$$$##@@#
&*(^())(_(&%!@#$$^*

(匹配所有符号存在的行)



7、[:space:]:表示空白字符,包括空格和制表符;


[root@localhost ~]# grep "[[:space:]]" a.txt |wc -l
3

(匹配空白字符存在的行,在此文件中有三行)



    8、[a-z]:只表示所有的小写字母;

               [root@localhost ~]# grep "[a-z]" a.txt         
               aaaaaaaaaaaaaaaaaa
               bbbbbbbbbbbbbbbbbbb
               ccccccccccccccc2222

(匹配所有小写字母存在的行)


    9、[A-Z]:只表示所有的大写字母;

[root@localhost ~]# grep "[A-Z]" a.txt                             
DDDDDDDDDDDDDCCCCC
AAACACABCAAABCAAAAA

(匹配所有大写字母存在的行)


    10、[0-9]:仅表示所有的十进制数码;

[root@localhost ~]# grep "[0-9]" a.txt 
ccccccccccccccc2222

(匹配所有小写字母存在的行)





    次数匹配类:该类字符前面的一个字符可以出现的次数;

    1、*:其前面的字符可以出现任意次,即:0次,1次或多次;

[root@localhost ~]# grep "AAA*" a.txt  
AAACACABCAAABCAAAAA

(匹配有AAA的行)



    2、\?:其前面的字符可有可无,即:0次或1次;

    [root@localhost ~]# echo /etc/passwd | grep -o "[^/]*/\?$"
    passwd

    (输出某个路径的基名)



    3、\{m,n\}:其前面的字符至少出现m次,最多不超过n次;

[root@localhost ~]# grep "A\{2,5\}" a.txt  
AAACACABCAAABCAAAAA

(匹配打A的行中,A至少出现2次,不能超过5次)



    4、\{m\}:其前面的字符必须出现m次;

[root@localhost ~]# grep "A\{5\}" a.txt  
AAACACABCAAABCAAAAA

(匹配打的A在本行中必须出现5次,匹配结果是最后的AAAAA)


    5、\{m,\}:其前面的字符至少出现m次;

    [root@localhost ~]# grep "A\{1,\}" a.txt  
AAACACABCAAABCAAAAA

(匹配到的A至少出现1次,即结果中的A全部匹配到)


    6、\{,n\}:其前面的字符至少出现0次,最多不超过n次;

[root@localhost ~]# grep "a\{,1\}" b.txt  
aabaaabacccvv
ababababababa
cccccccccccca

(匹配到的a至少出现0次,最多不超过1

次)



    7、注意:在正则表达式中,表示任意长度的任意字符:".*"

    
[root@localhost ~]# grep "^[[:space:]].*" /etc/grub2.cfg

    (找出/etc/grub2.cfg以空白字符开头的非空白行;)


    位置锚定字符:

    行锚定:

    行首锚定:^

    行尾锚定:$

    [root@localhost ~]# grep "^[[:space:]]*$" /etc/grub2.cfg | wc -l
    17

    空白行数


    字锚定

    字首锚定:\<或\b

    字尾锚定:\>或\b


   

[root@localhost ~]# ifconfig | grep "\<[0-9]\>\|\<[1-9][0-9]\>"

找出一位数或者两位数


   


    分组与前向引用字符:

    \(\):将()中包含的内容作为一个不可分割的整体来处理;

    \1,\2,\3...:前向引用字符,

    是正则表达式处理引擎的内置变量,\1表示前面所出现的第一组小括号中所阔扩选的内容;\2表示前面所出现的第二组小括号中扩选的内容;...

    \(string1\(string2\)\): \1表示string1,\2表示string2

    \(string1\).*\(string2\): \1表示string1,\2表示string2

[root@localhost ~]# grep "^\(root\).*\1" /etc/passwd
root:x:0:0:root:/root:/bin/bash


或者:

\|:将其左右的字符或字符串当做整体来对待;

"C\|cat" C cat


[root@localhost ~]# ifconfig | grep "\<[0-9]\>\|\<[1-9][0-9]\>"

(找出ifconfig中一位数或者两位数)




扩展的正则表达式元字符:ERE

        字符匹配类:

            1、".":匹配任意的单个字符;

            [root@localhost ~]# egrep "a.b" a.txt
            aaaaaabbbabcabccccc
            abcabcabcbcacbaaaaa

            (匹配a和b中间跟上任意字符的行,结果分别为abc,以及acb)



           2、 "[]":匹配任意指定范围内的单个字符;

            [root@localhost ~]# egrep "[a]" a.txt
            aaaaaabbbabcabccccc
            abcabcabcbcacbaaaaa

            (匹配只有a的行)


            3、[^]:匹配任意指定范围以外的单个字符;

            [root@localhost ~]# egrep "[^abc]" a.txt
            ddddddddddddddddddk
            ccccccccccccccccccl

            (匹配除了字母abc以外的字符存在的行,结果是d,k以及l)



            下列所有的字符集都可以放置于[]之中,用于匹配字符集范围内的单个字符;

                1、[:lower:]:所有的小写字母

                [root@localhost ~]# egrep "[[:lower:]]" a.txt
                aaaaaaaaaaaaaaaaaaa
                bbbbbbbbbbbbbbbbbbb

                (匹配所有小写字母存在的行)




                2、[:upper:]:所有的大写字母

                [root@localhost ~]# egrep "[[:upper:]]" a.txt
                DDDDDDDDDDDDDCCCCCC
                AAACACABCAAABCAAAAA

                (匹配所有大写字母存在的行)


                3、[:alpha:]:所有字母,大小写字母;

                [root@localhost ~]# egrep "[[:alpha:]]" a.txt
                DDDDDDDDDDDDDCCCCCC
                AAACACABCAAABCAAAAA
                aaaaaaaaaaaaaaaaaaa
                bbbbbbbbbbbbbbbbbbb

                (匹配所有大小字母存在的行)



                4、[:digit:]:所有单个的十进制数字;

                [root@localhost ~]# egrep "[[:digit:]]" a.txt
                ccccccccccccccc2222

                (匹配单个十进制数字存在的行)




                5、[:alnum:]:所有的字母和十进制数字;

                [root@localhost ~]# egrep "[[:alnum:]]" a.txt
                DDDDDDDDDDDDDCCCCCC
                AAACACABCAAABCAAAAA
                aaaaaaaaaaaaaaaaaaa
                bbbbbbbbbbbbbbbbbbb
                ccccccccccccccc2222

                (匹配所有的字母和十进制数字)




                6、[:punct:]:所有的符号

                [root@localhost ~]# egrep "[[:punct:]]" a.txt
                $######@@@#$$$##@@#
                &*(^())(_(&%!@#$$^*

                (匹配所有符号存在的行)



                7、[:space:]:表示空白字符,包括空格和制表符;

                [root@localhost ~]# egrep "[[:space:]]" a.txt |wc -l
                3

                (匹配空白字符存在的行,在此文件中有三行)



                8、[a-z]:只表示所有的小写字母;

                [root@localhost ~]# egrep "[a-z]" a.txt 
                aaaaaaaaaaaaaaaaaaa
                bbbbbbbbbbbbbbbbbbb
                ccccccccccccccc2222

                (匹配所有小写字母存在的行)


                9、[A-Z]:只表示所有的大写字母;

                [root@localhost ~]# egrep "[A-Z]" a.txt 
                DDDDDDDDDDDDDCCCCCC
                AAACACABCAAABCAAAAA

                (匹配所有大写字母存在的行)


                10、[0-9]:仅表示所有的十进制数码;

                [root@localhost ~]# egrep "[0-9]" a.txt 
                ccccccccccccccc2222

                (匹配所有小写字母存在的行)





        次数匹配类:该类字符前面的一个字符可以出现的次数;

            1、*:其前面的字符可以出现任意次,即:0次,1次或多次;

            [root@localhost ~]# egrep "AAA*" a.txt  
            AAACACABCAAABCAAAAA

            (匹配有AAA的行)



            2、?:其前面的字符可有可无,即:0次或1次;

            [root@localhost ~]# echo /etc/passwd | egrep -o "[^/]*/?$"
            passwd

            (输出某个路径的基名)



            3、{m,n}:其前面的字符至少出现m次,最多不超过n次;


 

          [root@localhost ~]# egrep "A{2,5}" a.txt  
            AAACACABCAAABCAAAAA

            (匹配打A的行中,A至少出现2次,不能超过5次)



            4、{m}:其前面的字符必须出现m次;

            [root@localhost ~]# egrep "A{5}" a.txt  
            AAACACABCAAABCAAAAA

            (匹配打的A在本行中必须出现5次,匹配结果是最后的AAAAA)


            5、{m,}:其前面的字符至少出现m次;

            [root@localhost ~]# egrep "A{1,}" a.txt  
            AAACACABCAAABCAAAAA

            (匹配到的A至少出现1次,即结果中的A全部匹配到)


            6、{,n}:其前面的字符至少出现0次,最多不超过n次;

            [root@localhost ~]# egrep "a{,1}" b.txt  
            aabaaabacccvv
            ababababababa
            cccccccccccca

            (匹配到的a至少出现0次,最多不超过1

            次)



            7、注意:在正则表达式中,表示任意长度的任意字符:".*"

            [root@localhost ~]# grep "^[[:space:]].*" /etc/grub2.cfg

            (找出/etc/grub2.cfg以空白字符开头的非空白行;)


        位置锚定字符:

            行锚定:

                行首锚定:^

                行尾锚定:$

                [root@localhost ~]# egrep "^[[:space:]]*$" /etc/grub2.cfg | wc -l
                17

               (匹配/etc/grub2.cfg空白行数)


            字锚定

                字首锚定:\<或\b

                字尾锚定:\>或\b


               

 [root@localhost ~]# ifconfig | egrep "\<[0-9]\>|\<[1-9][0-9]\>"

                (找出ifconfig一位数或者两位数)


                


        分组与前向引用字符:

            ():将()中包含的内容作为一个不可分割的整体来处理;

            \1,\2,\3...:前向引用字符,

                是正则表达式处理引擎的内置变量,\1表示前面所出现的第一组小括号中所阔扩选的内容;\2表示前面所出现的第二组小括号中扩选的内容;...                

                [root@localhost ~]# grep "^(root).*\1" /etc/passwd
                root:x:0:0:root:/root:/bin/bash


            或者:

                |:将其左右的字符或字符串当做整体来对待;

                "C|cat" C cat


 

     [root@localhost ~]# ifconfig | grep "\<[0-9]\>|\<[1-9][0-9]\>"

                (找出ifconfig中一位数或者两位数)



grep系中常用命令:

1、-A num:同时显示被PATTERN匹配到的行及其后续num行;


[root@localhost ~]# grep -A 2 "^root" /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin


2、-B num:同时显示被PATTERN匹配到的行及其前面num行;

[root@localhost ~]# grep -B 2 "^xwl" /etc/passwd
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
tcpdump:x:72:72::/:/sbin/nologin
xwl:x:1000:1000:XWL:/home/xwl:/bin/bash

3、-C num:同时显示被PATTERN匹配到的行及其前后num行;

[root@localhost ~]# grep -C 2 "^sshd" /etc/passwd
gdm:x:42:42::/var/lib/gdm:/sbin/nologin
gnome-initial-setup:x:988:983::/run/gnome-initial-setup/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
avahi:x:70:70:Avahi mDNS/DNS-SD Stack:/var/run/avahi-daemon:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin



4、--color[=WHEN]:以高亮颜色表示被匹配到的内容;


[root@localhost ~]#  grep --color=auto '^sshd' /etc/passwd
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin

(sshd为加上颜色的)



5、-c,--count:不输出被PATTERN匹配的行的内容,而是输出被PATTERN匹配到的行数;

[root@localhost ~]# grep  -c "^[[:space:]]*$" /etc/grub2.cfg 
17

6、-E:可以使GREP命令支持扩展正则表达式元字符;相当于egrep命令;

[root@localhost ~]# ifconfig | grep  -E "\<[0-9]\>|\<[1-9][0-9]\>"


7、-F:--fixed-string:相当于fgrep;



8、-e PATTERN, --regexp=PATTERN:指定多个模式PATTERN在一个命令行中生效;

[root@localhost ~]# grep -e "AAA*" -e "aaa*" a.txt 
AAACACABCAAABCAAAAC
aaaaaaaaaaaaaaaaaaa


9、-f FILE, --file=FILE:从指定的文件中读取多个PATTERN用于一次搜索;

[root@localhost ~]# cat a.txt | grep -f b.sh
$######@@@#$$$##@@#
&*(^())(_(&%!@#$$^*

(从其中找出相同的字符进行匹配)



10、-i, --ignore-case:忽略文件中的字符的大小写;

[root@localhost ~]# grep -i "[[:upper:]]" a.txt 
DDDDDDDDDDDDDCCCCCC
AAACACABCAAABCAAAAC
aaaaaaaaaaaaaaaaaaa
bbbbbbbbbbbbbbbbbbb
ccccccccccccccc2222

(-i忽略大小写,本来是匹配大写字母,最后连小写字母也一起匹配上)



11、-o, --only-matching:仅显示被PATTERN匹配到的部分;关闭了贪婪模式;

(取得字符串很有用)

[root@localhost ~]# echo /etc/passwd | grep -o "[^/]*/\?$"
[root@localhost ~]# passwd

(取出/etc/passwd路径中的基名)

    12、-q, --quiet, --silent:安静模式;没有输出结果;相当于grep > /dev/null



13、-v, --invert-match:显示没有被PATTERN匹配到的行;

[root@localhost ~]# grep -v  "^[[:space:]]*$" /etc/grub2.cfg | wc -l
123