美文网首页
linux(十二)sed和awk

linux(十二)sed和awk

作者: alonwang | 来源:发表于2016-09-22 16:10 被阅读35次

sed本身是管线命令,可以分析standard input,可以将数据进行取代,删除,新增,撷取特定行等.

sed [-nefr] [action]

  • -n :使用 silent模式,只显示经过sed处理的行
  • -e :直接在命令行界面进行sed的动作编辑.
  • -f :直接将sed的动作写在一个文件内,-f filename 则可以执行filename内的sed动作.
  • -r :sed的动作支持的是延伸型正则表达式的语法.
  • -i :直接修改读取的文件内容而不是由屏幕输出.
  • -p :打印输出

action说明

[n1 [,n2]] function

  • n1,n2 :不一定存在,一般代表选择进行动作的行数.

function 说明

  • a :新增,a后接字串,这些字串会在目前行的下一行(新增)出现

  • c :取代,c后接字串,可以取代n1,n2之间的行

  • d :删除.不接东西.

  • i :插入,后接字串,在目前的上一行出现(新增).

  • s :取代.'sed s/要被取代的字符串/新的字符串/g'

    sed -i 's/\/\/.*//'  *.txt
    

去除所有的txt文件中的 //及之后的内容(直接更新文件)

awk

行处理命令,默认以空格为分界将一行分为多个项.

awk '条件类型1{动作1} 条件类型2{动作2}...' filename

例如

last -n 5 |awk '{print $1 "\t" $3}'

wang    :0
reboot  boot
wang    :0
reboot  boot
wang    :0
wtmp    Thu

n表示这时某行中的第n项,0代表整行

awk内置变量

变量名称 代表意义
NF 每一行 ($0) 拥有的字段总数
NR 目前 awk 所处理的是“第几行”数据
FS 目前的分隔字符,默认是空白键

例如

last -n 5 | awk '{print $1 "\t lines: " NR "\t columes" NF}'

wang     lines: 1    columes11
reboot   lines: 2    columes10
wang     lines: 3    columes10
reboot   lines: 4    columes10
wang     lines: 5    columes10
     lines: 6    columes0
wtmp     lines: 7    columes7

awk关键字

如果需要设置awk变量,可以使用BEGIN和END

例如

cat /etc/passwd | awk 'BEGIN {FS=":"} $3 < 10 {print $1 "\t " $3} '

root     0
daemon   1
bin  2
sys  3
sync     4
games    5
man  6
lp   7
mail     8
news     9

diff 文件比对.以行为单位.

diff [-bBi] source dest

  • -b : 忽略一行中,仅有多个空白的差异
  • -B : 忽略空白行的差异
  • -i : 忽略大小写的不同

cut -[bcdf] filename 从文件中提取所需信息的利器

参数说明

  • -b 以字节制定

cmp 以字节比较.

cmp [-l] file1 file2

  • -l 将所有不同点的字节处都列出来,默认只会输出第一个发现的不同点

这个基本不会用到,就不再写了

patch

补丁文件

patch -pN < patchfile

patch -R -pN < patchfile

  • -p : 后接代表"取消几层目录"的意思
  • -R : 代表还原,将亲的文件还原成原来旧的版本

  • printf 可以通过一些特殊符号来将数据进行格式化输出;
  • awk 可以使用“字段”为依据,进行数据的重新整理与输出;
  • 文件的比对中,可利用 diff 及 cmp 进行比对,其中 diff 主要用在纯文本方面的新旧版本
    比对
  • patch 指令可以将旧版数据更新到新版 (主要亦由 diff 创建 patch 的补丁来源文件)

相关文章

  • Linux 学习笔记(十四):Linux 正则表达式基础

    grep 命令 作为linux中最为常用的三大文本(awk(Linux awk教程),sed(Linux sed教...

  • linux(十二)sed和awk

    sed本身是管线命令,可以分析standard input,可以将数据进行取代,删除,新增,撷取特定行等. sed...

  • sed & awk & tr

    sed & awk & tr sed awk awk 是一种编程语言,用于在linux/unix下对文本和数据进行...

  • awk实现类sql的join操作

    awk、grep和sed被称为linux三剑客,事实上grep和awk我在日常工作中也常用到(sed用的比较少),...

  • awk

    awk的简介和功能 awk: Linux 文本处理三剑客:grep、sed和awk。其中grep是一种文本过滤工具...

  • Linux-grep、sed、awk之awk命令

    参考:Linux三剑客(grep sed awk) 之 awk[https://www.jianshu.com/p...

  • Linux三剑客

    Linux三剑客 标签(空格分隔): Linux grep sed awk [TOC] 在Linux系统当中,处理...

  • linux命令sed和awk

    1. sed命令 sed 本身是一个管线命令,可以分析 standard input 的! 而且 sed 还可以将...

  • PHP高手进阶指南

    Linux常用命令 grep、awk、sed、sort、uniq、ps、df Linux系统性能分析 vmstat...

  • 文字处理

    Linux 下进行字符串操作最常用的三个命令: awk (检索) sed (编辑) grep (匹配) awk 语...

网友评论

      本文标题:linux(十二)sed和awk

      本文链接:https://www.haomeiwen.com/subject/epmzettx.html