awk

作者: lmem | 来源:发表于2016-12-26 18:12 被阅读12次

    1.调用方式

    1.命令行方式
    awk [-F  field-separator]  'commands'  input-file(s)
    其中,commands 是真正awk命令,[-F域分隔符]是可选的。 input-file(s) 是待处理的文件。
    在awk中,文件的每一行中,由域分隔符分开的每一项称为一个域。
    通常,在不指名-F域分隔符的情况下,默认的域分隔符是空格。
    
    2.shell脚本方式
    将所有的awk命令插入一个文件,并使awk程序可执行,然后awk命
    令解释器作为脚本的首行,一遍通过键入脚本名称来调用。
    相当于shell脚本首行的:#!/bin/sh
    可以换成:#!/bin/awk
    
    3.将所有的awk命令插入一个单独文件,然后调用:
    awk -f awk-script-file input-file(s)
    其中,-f选项加载awk-script-file中的awk脚本,input-file(s)跟上面的是一样的。
    
    2.只显示最近登录的5个帐号
    #last -n 5 | awk  '{print $1}'
    root
    root
    root
    dmtsai
    root
    
    3.如果只是显示/etc/passwd的账户和账户对应的shell,而账户与shell之间以tab键分割
    #cat /etc/passwd |awk  -F ':'  '{print $1"\t"$7}'
    root    /bin/bash
    daemon  /bin/sh
    bin     /bin/sh
    sys     /bin/sh
    
    4.如果只是显示/etc/passwd的账户和账户对应的shell,而账户与shell之间以逗号分割,而且在所有行添加列名name,shell,在最后一行添加"blue,/bin/nosh"。
    cat /etc/passwd |awk  -F ':'  'BEGIN {print "name,shell"}  {print $1","$7} END {print "blue,/bin/nosh"}'
    name,shell
    root,/bin/bash
    daemon,/bin/sh
    bin,/bin/sh
    sys,/bin/sh
    ....
    blue,/bin/nosh
    
    5.pattern的使用示例

    awk -F: '/^root/' /etc/passwd

    # awk -F: '/root/{print $7}' /etc/passwd /bin/bash
    
    6.awk内置变量
    FS                 设置输入域分隔符,等价于命令行 -F选项
    RS                 控制记录分隔符
    
    OFS                输出域分隔符
    ORS                输出记录分隔符
    
    NF                 浏览记录的域的个数
    NR                 已读的记录数
    
    FILENAME           awk浏览的文件名
    
    ARGC               命令行参数个数
    ARGV               命令行参数排列
    ENVIRON            支持队列中系统环境变量的使用
    
    FNR                浏览文件的记录数
    

    统计/etc/passwd:文件名,每行的行号,每行的列数,对应的完整行内容:

    #awk  -F ':'  '{print "filename:" FILENAME ",linenumber:" NR ",columns:" NF ",linecontent:"$0}' /etc/passwd
    filename:/etc/passwd,linenumber:1,columns:7,linecontent:root:x:0:0:root:/root:/bin/bash
    filename:/etc/passwd,linenumber:2,columns:7,linecontent:daemon:x:1:1:daemon:/usr/sbin:/bin/sh
    filename:/etc/passwd,linenumber:3,columns:7,linecontent:bin:x:2:2:bin:/bin:/bin/sh
    filename:/etc/passwd,linenumber:4,columns:7,linecontent:sys:x:3:3:sys:/dev:/bin/sh
    

    使用printf替代print,可以让代码更加简洁,易读

    awk -F ':' '{printf("filename:%10s,linenumber:%s,columns:%s,linecontent:%s\n",FILENAME,NR,NF,$0)}' /etc/passwd
    ```
    ****
    ##**awk编程**
    ####1.** 变量和赋值**
    自定义变量
    ```
    awk '{count++;print $0;} END{print "user count is ", count}' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    ......
    user count is  40
    ```
    统计某个文件夹下的文件占用的字节数
    ```
    ls -l |awk 'BEGIN {size=0;} {size=size+$5;} 
    END{print "[end]size is ", size/1024/1024,"M"}' 
    [end]size is  8.25889 M
    ```
    ####2.**条件语句**
    ```
    if (expression) {
        statement;
        statement;
        ... ...
    }
    
    if (expression) {
        statement;
    } else {
        statement2;
    }
    
    if (expression) {
        statement1;
    } else if (expression1) {
        statement2;
    } else {
        statement3;
    }
    ```
    ```
    ls -l |awk 'BEGIN {size=0;print "[start]size is ", size} {if($5!=4096){size=size+$5;}} 
    END{print "[end]size is ", size/1024/1024,"M"}' 
    [end]size is  8.22339 M
    ```
    ####3.循环语句
    awk中的循环语句同样借鉴于C语言,支持while、do/while、for、break、continue,这些关键字的语义和C语言中的语义完全相同。
    ####4.数组
    显示/etc/passwd的账户
    ```
    awk -F ':' 'BEGIN {count=0;} {name[count] = $1;count++;}; 
    END{for (i = 0; i < NR; i++) print i, name[i]}' /etc/passwd
    root
    daemon
    bin
    sys
    sync
    games
    ......
    ```
    ***
    ####一个文件中单词统计的demo
    ```
    #! /bin/sh
    
    
    INIT_TAB_AWK=""
    # Parameter to initialize awk script.
    count_case=0
    FILE_PARSE=$1
    
    E_PARAMERR=85
    
    usage()
    {
        echo "Usage: letter-count.sh file letters" 2>&1
        # For example:   ./letter-count2.sh filename.txt a b c
        exit $E_PARAMERR  # Too few arguments passed to script.
    }
    
    if [ ! -f "$1" ] ; then
        echo "$1: No such file." 2>&1
        usage                 # Print usage message and exit.
    fi 
    
    if [ -z "$2" ] ; then
        echo "$2: No letters specified." 2>&1
        usage
    fi 
    #删除第一个参数$@ 为字符串$#为参数个数
    shift                      # Letters specified.
    for letter in `echo $@`    # For each one . . .
      do
      INIT_TAB_AWK="$INIT_TAB_AWK tab_search[${count_case}] = \
      \"$letter\"; final_tab[${count_case}] = 0; " 
      # expr 计算
      count_case=`expr $count_case + 1`
    done
    
    # 测试
    # echo $INIT_TAB_AWK;
    
    cat $FILE_PARSE |
    # ---------------------------------------------------------------------
    # Earlier version of script:
    # awk -v tab_search=0 -v final_tab=0 -v tab=0 -v \
    # nb_letter=0 -v chara=0 -v chara2=0 \
    #split 函数的用法
    awk \
    "BEGIN { $INIT_TAB_AWK } \
    { split(\$0, tab, \"\"); \
    for (chara in tab) \
    { for (chara2 in tab_search) \
    { if (tab_search[chara2] == tab[chara]) { final_tab[chara2]++ } } } } \
    END { for (chara in final_tab) \
    { print tab_search[chara] \" => \" final_tab[chara] } }"
    
    exit $?
    ```
    删除指定进程
    ```
    #!/bin/bash
    # 必须运行在root权限
    SERPORT=ttyS3
    killppp="eval kill -9 `ps ax | awk '/ppp/ { print $1 }'`"
    
    $killppp                     # 是一个命令
    
    exit $?
    ```

    相关文章

      网友评论

          本文标题:awk

          本文链接:https://www.haomeiwen.com/subject/xtgjvttx.html