美文网首页
正则介绍、grep、egrep

正则介绍、grep、egrep

作者: XiaoMing丶 | 来源:发表于2018-10-16 22:30 被阅读0次

    目录

    一、正则介绍
    二、grep 
    三、egrep

    一、正则介绍

    正则就是一串有规律的字符串,掌握好正则对于编写shell脚本有很大帮助。各种编程语言中都有正则,原理是一样的。

    二、grep

    • grep(global search regular expression(RE) and print out the line,全面搜索正则表达式并把行打印出来)是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来。

    该命令的格式为:grep [-cinvABC] 'word'
    filename,其常用的选项如下所示。

    -c:表示打印符合要求的行数。
    -i:表示忽略大小写。
    -n:表示输出符合要求的行及其行号。
    -v:表示反转查找。
    -A:后面跟一个数字(有无空格都可以),例如-A2表示打印符合要求的行以及下面两行。
    -B:后面跟一个数字,例如-B2表示打印符合要求的行以及上面两行。
    -C:后面跟一个数字,例如-C2表示打印符合要求的行以及上下各两行。

    • 首先看看-A、-B和-C这3个选项的用法。

    -A2会把包含halt的行以及这行下面的两行都打印出来;-B2会把包含halt的行以及这行上面的两行都打印出来;-C2会把包含halt的行以及这行上下各两行都打印出来。示例命令如下:

    [root@minglinux ~]# grep -A2 'halt' /etc/passwd
    halt:x:7:0:halt:/sbin:/sbin/halt
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    [root@minglinux ~]# grep -B2 'halt' /etc/passwd
    sync:x:5:0:sync:/sbin:/bin/sync
    shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
    halt:x:7:0:halt:/sbin:/sbin/halt
    [root@minglinux ~]# grep -C2 'halt' /etc/passwd
    sync:x:5:0:sync:/sbin:/bin/sync
    shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
    halt:x:7:0:halt:/sbin:/sbin/halt
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    
    • 过滤出带有某个关键词的行,并输出行号
    [root@minglinux ~]# grep -n 'root' /etc/passwd
    1:root:x:0:0:root:/root:/bin/bash
    10:operator:x:11:0:operator:/root:/sbin/nologin
    
    • 过滤出不带有某个关键词的行,并输出行号
    [root@minglinux ~]# grep -nv 'nologin' /etc/passwd
    1:root:x:0:0:root:/root:/bin/bash
    6:sync:x:5:0:sync:/sbin:/bin/sync
    7:shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
    8:halt:x:7:0:halt:/sbin:/sbin/halt
    20:mysql:x:27:27:MySQL Server:/var/lib/mysql:/bin/false
    23:test1:x:1000:1000::/home/test1:/bin/bash
    
    • 过滤出所有包含数字的行和过滤出所有不包含数字的行
    [root@minglinux-01 ~]# grep '[0-9]' /etc/inittab 
    # multi-user.target: analogous to runlevel 3
    # graphical.target: analogous to runlevel 5
    [root@minglinux-01 ~]# grep -v '[0-9]' /etc/inittab 
    # inittab is no longer used when using systemd.
    #
    # ADDING CONFIGURATION HERE WILL HAVE NO EFFECT ON YOUR SYSTEM.
    #
    # Ctrl-Alt-Delete is handled by /usr/lib/systemd/system/ctrl-alt-del.target
    #
    # systemd uses 'targets' instead of runlevels. By default, there are two main targets:
    #
    #
    # To view current default target, run:
    # systemctl get-default
    #
    # To set a default target, run:
    # systemctl set-default TARGET.target
    #
    
    • 过滤掉所有以#开头的行
    [root@minglinux-01 ~]# cat /etc/inittab 
    # inittab is no longer used when using systemd.
    #
    # ADDING CONFIGURATION HERE WILL HAVE NO EFFECT ON YOUR SYSTEM.
    #
    # Ctrl-Alt-Delete is handled by /usr/lib/systemd/system/ctrl-alt-del.target
    #
    # systemd uses 'targets' instead of runlevels. By default, there are two main targets:
    #
    # multi-user.target: analogous to runlevel 3
    # graphical.target: analogous to runlevel 5
    #
    # To view current default target, run:
    # systemctl get-default
    #
    # To set a default target, run:
    # systemctl set-default TARGET.target
    #
    [root@minglinux-01 ~]# grep -v '^#' /etc/inittab 
    [root@minglinux-01 ~]# 
    

    在正则表达式中,^表示行的开始,$表示行的结尾,那么空行则可以用^$表示。

    • 过滤掉所有空行
    [root@minglinux-01 ~]# cat 1.txt 
    111
    222
    333
    123
    222
    
    abc
    
    [root@minglinux-01 ~]# grep -v '^$' 1.txt 
    111
    222
    333
    123
    222
    abc
    
    • [^字符]表示除[]内字符之外的字符。^[字符]写到方括号外面表示以[]内字符开头的字符。
      示例如下:
    [root@minglinux-01 ~]# cat 2.txt 
    123
    456
    abc
    abc123
    #$%^abc123
    [root@minglinux-01 ~]# grep '[^a-zA-Z]' 2.txt 
    123
    456
    abc123
    #$%^abc123
    [root@minglinux-01 ~]# grep '^[^a-zA-Z]' 2.txt 
    123
    456
    #$%^abc123
    
    • 过滤出任意一个字符和重复字符

    .表示任意一个字符。r.o表示把r与o之间有一个任意字符的行过滤出来。示例如下:

    [root@minglinux-01 ~]# grep 'r.o' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    operator:x:11:0:operator:/root:/sbin/nologin
    

    *表示零个或多个前面的字符。ooo表示oo、ooo、oooo...或者更多的o。示例如下:

    [root@minglinux-01 ~]# grep 'ooo*' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    postfix:x:89:89::/var/spool/postfix:/sbin/nologin
    

    .*表示零个或多个任意字符,空行也包含在内,它会把/etc/passwd文件里面的所有行都匹配到,如下所示:

    [root@minglinux-01 ~]# grep '.*' /etc/passwd |wc -l
    22
    [root@minglinux-01 ~]#  wc -l /etc/passwd
    22 /etc/passwd
    
    • 指定要过滤出的字符出现次数
      示例命令如下:
    [root@minglinux-01 ~]# grep 'o\{2\}' /etc/passwd 
    root:x:0:0:root:/root:/bin/bash
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    postfix:x:89:89::/var/spool/postfix:/sbin/nologin
    

    这里用到了符号{},其内部为数字,表示前面的字符要重复的次数。需要强调的是,{}左右都需要加上转义字符\。另外,使用“{ }”还可以表示一个范围,具体格式为{n1,n2},其中n1 < n2,表示重复n1到n2次前面的字符,n2还可以为空,这时表示大于等于n1次。

    三、egrep

    egrep执行效果与grep -E相似,{}是可以直接被egrep使用,而不用加\转义,所以grep 'o{2}'和egrep '{2}'的结果是一样的。如下所示:

    [root@minglinux-01 ~]# grep 'o\{2\}' /etc/passwd 
    root:x:0:0:root:/root:/bin/bash
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    postfix:x:89:89::/var/spool/postfix:/sbin/nologin
    [root@minglinux-01 ~]# egrep 'o{2}' /etc/passwd 
    root:x:0:0:root:/root:/bin/bash
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    postfix:x:89:89::/var/spool/postfix:/sbin/nologin
    [root@minglinux-01 ~]# grep -E 'o{2}' /etc/passwd
    
    • 过滤出一个或多个指定的字符
      示例命令如下:
    [root@minglinux-01 ~]# egrep 'o+' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    bin:x:1:1:bin:/bin:/sbin/nologin
    daemon:x:2:2:daemon:/sbin:/sbin/nologin
    adm:x:3:4:adm:/var/adm:/sbin/nologin
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    games:x:12:100:games:/usr/games:/sbin/nologin
    ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
    nobody:x:99:99:Nobody:/:/sbin/nologin
    systemd-network:x:192:192:systemd Network Management:/:/sbin/nlogin
    dbus:x:81:81:System message bus:/:/sbin/nologin
    polkitd:x:999:998:User for polkitd:/:/sbin/nologin
    sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nolgin
    postfix:x:89:89::/var/spool/postfix:/sbin/nologin
    ming:x:1001:1002::/home/ming:/bin/bash
    test10:x:1010:1003::/home/test10:/bin/bash
    user11:x:1005:1004::/home/user11:/bin/bash
    ntp:x:38:38::/etc/ntp:/sbin/nologin
    

    上例的符号+,它表示匹配1个或多个+前面的字符,这个“+”是不支持被grep直接使用的。

    • 过滤出零个或一个指定的字符
      示例命令如下:
    [root@minglinux-01 ~]# egrep 'ooo?' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    postfix:x:89:89::/var/spool/postfix:/sbin/nologin
    [root@minglinux-01 ~]# egrep 'oo?' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    bin:x:1:1:bin:/bin:/sbin/nologin
    daemon:x:2:2:daemon:/sbin:/sbin/nologin
    adm:x:3:4:adm:/var/adm:/sbin/nologin
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    games:x:12:100:games:/usr/games:/sbin/nologin
    ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
    nobody:x:99:99:Nobody:/:/sbin/nologin
    systemd-network:x:192:192:systemd Network Management:/:/sbin/nlogin
    dbus:x:81:81:System message bus:/:/sbin/nologin
    polkitd:x:999:998:User for polkitd:/:/sbin/nologin
    sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nolgin
    postfix:x:89:89::/var/spool/postfix:/sbin/nologin
    ming:x:1001:1002::/home/ming:/bin/bash
    test10:x:1010:1003::/home/test10:/bin/bash
    user11:x:1005:1004::/home/user11:/bin/bash
    ntp:x:38:38::/etc/ntp:/sbin/nologin
    
    • 过滤出字符串 1 或者字符串 2
      示例命令如下:
    [root@minglinux-01 ~]# egrep 'root|nologin' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    bin:x:1:1:bin:/bin:/sbin/nologin
    daemon:x:2:2:daemon:/sbin:/sbin/nologin
    adm:x:3:4:adm:/var/adm:/sbin/nologin
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
    operator:x:11:0:operator:/root:/sbin/nologin
    games:x:12:100:games:/usr/games:/sbin/nologin
    ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
    nobody:x:99:99:Nobody:/:/sbin/nologin
    systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
    dbus:x:81:81:System message bus:/:/sbin/nologin
    polkitd:x:999:998:User for polkitd:/:/sbin/nologin
    sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
    postfix:x:89:89::/var/spool/postfix:/sbin/nologin
    ntp:x:38:38::/etc/ntp:/sbin/nologin
    
    • egrep 中()的应用
    [root@minglinux-01 ~]# egrep 'r(oo|at)' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    operator:x:11:0:operator:/root:/sbin/nologin
    sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
    

    这里用()表示一个整体,上例中会把包含roo或者rat的行过滤出来。

    扩展

    把一个目录下,过滤所有.php文档中含有eval的行 
    grep -r --include="*.php" 'eval' /data/

    相关文章

      网友评论

          本文标题:正则介绍、grep、egrep

          本文链接:https://www.haomeiwen.com/subject/lzkhzftx.html