Linux-sed-1

作者: 耕读者 | 来源:发表于2019-08-20 17:22 被阅读0次

#############20190820-

sed命令用法

sed是一种流编辑器，它是文本处理中非常有用的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为『模式空间』（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。sed主要用来自动编辑一个或多个文件，简化对文件的反复操作，编写转换程序等。

sed的选项、命令、替换标记

命令格式

sed [options]'command'file(s)sed [options] -f scriptfilefile(s)

选项

参数完整参数说明

-e script--expression=script以选项中的指定的script来处理输入的文本文件

-f script--files=script以选项中的指定的script文件来处理输入的文本文件

-h--help显示帮助

-n--quiet --silent仅显示script处理后的结果

-V--version显示版本信息

参数

文件：指定待处理的文本文件列表

sed命令

命令说明

d删除，删除选择的行

D删除模板块的第一行

s替换指定字符

h拷贝模板块的内容到内存中的缓冲区

H追加模板块的内容到内存中的缓冲区

g获得内存缓冲区的内容，并替代当前模板块中文本

G获得内存缓冲区的内容，并追加到当前模板块文本的后面

l列表不能打印字符的清单

n读取下一个输入行，用下一个命令处理新的行而不是第一个命令

N追加下一个输入行到模板块后面并在二者间嵌入一个新行，改变当前行号码

p打印模板块的行

P打印模板块的第一行

q退出sed

b label分支到脚本中带有标记的地方，如果分支不存在则分支到脚本的末尾

r file从file中读行

t labelif分支，从最后一行开始，条件一旦满足或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾

T label错误分支，从最后一行开始，一旦发生错误或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾

w file写并追加模板块到file末尾

W file写并追加模板块的第一行到file末尾

!表示后面的命令对所有没有被选定的行发生作用

=打印当前行号

#把注释扩展到第一个换行符以前

sed替换标记

命令说明

g表示行内全面替换

p表示打印行

w表示把行写入一个文件

x表示互换模板块中的文本和缓冲区中的文本

y表示把一个字符翻译为另外的字符（但是不用于正则表达式）

\1子串匹配标记

&已匹配字符串标记

sed元字符集

命令说明

^匹配行开始，如：/^sed/匹配所有以sed开头的行。

$匹配行结束，如：/sed$/匹配所有以sed结尾的行。

.匹配一个非换行符的任意字符，如：/s.d/匹配s后接一个任意字符，最后是d。

*匹配0个或多个字符，如：/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。

[]匹配一个指定范围内的字符，如/[sS]ed/匹配sed和Sed。

[^]匹配一个不在指定范围内的字符，如：/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头，紧跟ed的行。

(..)匹配子串，保存匹配的字符，如s/(love)able/\1rs，loveable被替换成lovers。

&保存搜索字符用来替换其他字符，如s/love/&/，love这成love。

<匹配单词的开始，如:/<love/匹配包含以love开头的单词的行。

>匹配单词的结束，如/love>/匹配包含以love结尾的单词的行。

x{m}重复字符x，m次，如：/0{5}/匹配包含5个0的行。

x{m,}重复字符x，至少m次，如：/0{5,}/匹配至少有5个0的行。

x{m,n}重复字符x，至少m次，不多于n次，如：/0{5,10}/匹配5~10个0的行。

sed用法实例

我们先准备一个测试文件

MacBook-Pro:tmp maxincai$ cat test.txtmy cat'snameisbettyThisisyour dogmy dog'snameisfrankThisisyour fishmy fish'snameisgeorgeThisisyour goatmy goat'snameisadam

替换操作：s命令

替换文本中的字符串：

MacBook-Pro:tmp maxincai$ sed's/This/aaa/' test.txtmy cat'snameisbettyaaaisyour dogmy dog'snameisfrankaaaisyour fishmy fish'snameisgeorgeaaaisyour goatmy goat'snameisadam

-n选项和p命令一起使用表示只打印那些发生替换的行：

MacBook-Pro:tmp maxincai$ sed -n's/This/aaa/p'test.txtaaaisyour dogaaaisyour fishaaaisyour goat

测试过程中发现mac os x和linux还是有点不一样，换回centos 6.5进行测试

直接编辑文件选项-i，会匹配test.txt文件中每一行的第一个This替换为this:

[root@vagrant-centos65 workspace]# sed -i's/This/this/' test.txt[root@vagrant-centos65 workspace]# cat test.txtmy cat'snameisbettythisisyour dogmy dog'snameisfrankthisisyour fishmy fish'snameisgeorgethisisyour goatmy goat'snameisadam

全面替换标记g

使用后缀/g标记会替换每一行中的所有匹配：

[root@vagrant-centos65 workspace]# sed's/this/This/g' test.txtmy cat'snameisbettyThisisyour This dogmy dog'snameisThis frankThisisyour fishmy fish'snameisThis georgeThisisyour goatmy goat'snameisThis adam

当需要从第N处匹配开始替换时，可以使用/Ng:

[root@vagrant-centos65 workspace]# echo sksksksksksk | sed 's/sk/SK/2g'skSKSKSKSKSK[root@vagrant-centos65 workspace]# echo sksksksksksk | sed 's/sk/SK/3g'skskSKSKSKSK[root@vagrant-centos65 workspace]# echo sksksksksksk | sed 's/sk/SK/4g'skskskSKSKSK

定界符

以上命令中字符 / 在sed中作为定界符使用，也可以使用任意的定界符：

定界符出现在样式内部时，需要进行转义：

[root@vagrant-centos65 workspace]# echo'/usr/local/bin'| sed's/\/usr\/local\/bin/\/USR\/LOCAL\/BIN/g'/USR/LOCAL/BIN

删除操作：d命令

删除空白行：

[root@vagrant-centos65 workspace]# cat test.txtmy cat'sname is bettythisis yourthisdogmy dog'sname isthisfrankthisis your fishmy fish'sname isthisgeorgethisis your goatmy goat'sname isthisadam[root@vagrant-centos65 workspace]# sed '/^$/d' test.txtmy cat'sname is bettythisis yourthisdogmy dog'sname isthisfrankthisis your fishmy fish'sname isthisgeorgethisis your goatmy goat'sname isthisadam

删除文件的第2行：

[root@vagrant-centos65 workspace]# sed'2d' test.txtmy cat'sname is bettymy dog'sname isthisfrankthisis your fishmy fish'sname isthisgeorgethisis your goatmy goat'sname isthisadam

删除文件的第2行到末尾所有行：

[root@vagrant-centos65 workspace]# sed '2,$d' test.txtmycat's name is betty

删除文件最后一行：

[root@vagrant-centos65 workspace]# sed '$d' test.txtmy cat'sname is bettythisis yourthisdogmy dog'sname isthisfrankthisis your fishmy fish'sname isthisgeorgethisis your goat

删除文件中所有以my开头的行：

[root@vagrant-centos65 workspace]# sed '/^my/'d test.txtthisisyourthisdogthisisyour fishthisisyour goat

已匹配字符串标记&

正则表达式\w\+匹配每一个单词，使用[&]替换它，&对应之前所匹配到的单词：

[root@vagrant-centos65 workspace]# echo this is a test line | sed 's/\w\+/[&]/g'[this][is][a][test][line]

子串匹配标记\1

匹配给定样式的其中一部份：

[root@vagrant-centos65 workspace]# echothisisdigit7ina number | sed's/digit $[0-9]$/\1/'thisis7ina number

命令中digit 7，被替换成7.样式匹配到的子串是7，$..$用于匹配子串，对于匹配到的第一个子串标记为\1，依此类推匹配到的第二个结果就是\2,例如：

[root@vagrant-centos65 workspace]# echo aaa BBB | sed 's/$[a-z]\+$ $[A-Z]\+$/\2 \1/'BBB aaa

组合多个表达式

sed '表达式' | sed '表达式'

等价于

sed '表达式; 表达式'

引用

sed表达式可以使用单引号来引用，但是如果表达式内部包含变量字符串，就需要使用双引号。

[root@vagrant-centos65 workspace]# test=hello[root@vagrant-centos65 workspace]# echo hello WORLD | sed "s/$test/HELLO/"HELLO WORLD

选定行的范围：,(逗号)

打印从第5行开始到第一个包含以this开始的行之间的所有行：

[root@vagrant-centos65 workspace]# sed -n'5,/^this/p' test.txtmy fish'sname isthisgeorgethisis your goat

多点编辑：e命令

-e选项允许在同一行里执行多条命令：

[root@vagrant-centos65 workspace]# sed -e'1,5d' -e's/my/MY/' test.txtthisis your goatMYgoat'sname isthisadam

上面sed表达式的第一条命令删除1至5行，第二条命令用check替换test。命令的执行顺序对结果有影响。如果两个命令都是替换命令，那么第一个命令将影响第二个命令的结果。

和 -e 等价的命令是 --expression

从文件读入：r命令

file里的内容被读进来，显示在与test匹配的行后面，如果匹配多行，则file的内容将显示在所有匹配行的下面：

[root@vagrant-centos65 workspace]# cat test1.txtaaaaaaaa[root@vagrant-centos65 workspace]# sed '/my/r test1.txt' test.txtmy cat'sname is bettyaaaaaaaathisis yourthisdogmy dog'sname isthisfrankaaaaaaaathisis your fishmy fish'sname isthisgeorgeaaaaaaaathisis your goatmy goat'sname isthisadamaaaaaaaa

写入文件：w命令

在test.txt中所有包含my的行都被写入test2.txt里：

[root@vagrant-centos65 workspace]# sed -n '/my/w test2.txt' test.txt[root@vagrant-centos65 workspace]# cat test2.txtmy cat's name is betty

my dog's nameisthisfrankmy fish's name is this george

my goat's nameisthisadam

追加（行下）：a\命令

将this is a test line 追加到以my开头的行后面：

[root@vagrant-centos65 workspace]# sed '/^my/a\thisisa testline' test.txtmy cat'snameisbettythisisa testlinethisisyour this dogmy dog'snameisthis frankthisisa testlinethisisyour fishmy fish'snameisthis georgethisisa testlinethisisyour goatmy goat'snameisthis adamthisisa testline

在text.txt文件第2行之后插入this is a test line:

[root@vagrant-centos65 workspace]# sed'2a\thisis a test line' test.txtmy cat'sname is bettythisis yourthisdogthisis a test linemy dog'sname isthisfrankthisis your fishmy fish'sname isthisgeorgethisis your goatmy goat'sname isthisadam

插入（行上）：i\命令

将this is a test line 插入到以my开头的行前面：

[root@vagrant-centos65 workspace]# sed '/^my/i\thisisa testline' test.txtthisisa testlinemy cat'snameisbettythisisyour this dogthisisa testlinemy dog'snameisthis frankthisisyour fishthisisa testlinemy fish'snameisthis georgethisisyour goatthisisa testlinemy goat'snameisthis adam

下一个：n命令

如果my被匹配，则移动到匹配行的下一行，替换这一行的this为This,并打印该行：

[root@vagrant-centos65 workspace]# sed '/my/{n; s/this/This/; }' test.txtmy cat'sname is bettyThisis yourthisdogmy dog'sname isthisfrankThisis your fishmy fish'sname isthisgeorgeThisis your goatmy goat'sname isthisadam

变形：y命令

把1-10行内所有的abcde转变为大写，注意，正则表达式元字符不能使用这个命令：

[root@vagrant-centos65 workspace]# sed'1,10y/abcde/ABCDE/' test.txtmyCAt'snAmE isBEttythisis yourthisDogmyDog'snAmE isthisfrAnkthisis your fishmy fish'snAmE isthisgEorgEthisis your goAtmy goAt'snAmE isthisADAm

退出：q命令

打印完第3行，退出sed

[root@vagrant-centos65 workspace]# sed'3q' test.txtmy cat'sname is bettythisis yourthisdogmy dog'sname isthisfrank

打印奇数行或偶数行

方法1：

奇数行

[root@vagrant-centos65 workspace]# sed -n'p;n' test.txtmy cat'sname is bettymy dog'sname isthisfrankmy fish'sname isthisgeorgemy goat'sname isthisadam

偶数行

[root@vagrant-centos65 workspace]# sed -n 'n;p' test.txtthisisyourthisdogthisisyour fishthisisyour goat

方法2：

sed-n'1~2p'test.txtsed -n'2~2p'test.txt

更多的需要在以后的工作中慢慢摸索，这里只是一个简单的记录，以后如果有更多经验了再完善一篇sed实战吧。

标签: sed

好文要顶关注我收藏该文