shell数据处理之grep
0、写在最前面
系统:macOS Mojave 10.14.6
终端:自带shell(一些命令结果在Linux shell上的输出可能会有些偏差)
1、定义
grep(global search regular expression(RE) and print out the line,全面搜索正则表达式并把行打印出来)是一种强大的文本搜索工具。它能使用正则表达式搜索文本,并把匹配的行打印出来。
2、使用
grep "abc" file.txt #返回文件file.txt中包含"abc"的行,abc不加引号结果相同
grep "abc" file01.txt file02.txt ... #在多个文件中查找包含"abc"的行。对于多个文件,其他命令类似,不一一说明
grep -v "abc" file.txt #反向查找,输出文件file.txt中不含有"abc"的行
grep -n "abc" file.txt #输出文件file.txt中包含"abc"的行数、以及包含"abc"的行,形式如 2:abchf
grep -c "abc" file.txt #输出文件file.txt中包含"abc"的总行数,例如若file.txt中有3行含有"abc",则输出3
grep -i "abc" file.txt #不区分大小写查询
grep -w "abc" file.txt #精确查询,输出包含单词"abc"的行,若某一行为 abcd is ***,则此时-w abc获取不到结果
grep -o "abc" file.txt #只要文件file.txt某一行包含"abc",则输出"abc",不输出该行的其他内容
grep -E "[a-z]+." file.txt #使用正则表达式进行查询,输出包含 小写英文字母. 的行
grep "abc\|def" file.txt #或查询,查询文件file.txt中包含"abc"或"def"的行
grep -A 3 "abc" file.txt #输出包含"abc"的行以及其后面3行,-A:after,-A 3 也可以放在文件后面
grep -B 3 "abc" file.txt #输出包含"abc"的行以及其前面3行,-B:before
grep -C 3 "abc" file.txt #输出包含"abc"的行以及其前面3行、后面3行
3、终端实操
#file.txt 中的数据如下:
Han Meimei:"My name is Han Meimei. What's your name?"
Li Lei:"My name is Li Lei."
Han Meimei:"Nice to meet you."
Li Lei:"Nice to meet you,too."
Poly:"Welcome to Unit 1!"
#测试几个
#1、输出包含 name 的行
#grep "name" file.txt
Han Meimei:"My name is Han Meimei. What's your name?"
Li Lei:"My name is Li Lei."
#2、输出不包含 name 的行(空行也会输出)
#grep -v "name" file.txt
Han Meimei:"Nice to meet you."
Li Lei:"Nice to meet you,too."
Poly:"Welcome to Unit 1!"
#3、输出文件中包含 name 的行数
#grep -c "name" file.txt
2
#4、精确匹配 Li Lei(此时 -w Li Le 无结果输出)
#grep -w "Li Lei" file.txt
Li Lei:"My name is Li Lei."
Li Lei:"Nice to meet you,too."
#5、正则匹配包含字母 a-c 的行
#grep -E "[a-c]+" file.txt 或者 grep -E "[a,b,c]+" file.txt
Han Meimei:"My name is Han Meimei. What's your name?"
Li Lei:"My name is Li Lei."
Han Meimei:"Nice to meet you."
Li Lei:"Nice to meet you,too."
Poly:"Welcome to Unit 1!"
#6、输出包含 name或者包含Li Lei 的行
#grep "name\|Li Lei" file.txt
Han Meimei:"My name is Han Meimei. What's your name?"
Li Lei:"My name is Li Lei."
Li Lei:"Nice to meet you,too."
#7、输出包含 name 及其后面的3行
#grep -A 3 "name" file.txt,等价于 grep "name" file.txt -A 3
Han Meimei:"My name is Han Meimei. What's your name?"
Li Lei:"My name is Li Lei."
Han Meimei:"Nice to meet you."
Li Lei:"Nice to meet you,too."
4、注意点:单引号、双引号和不加引号
1)、单引号
可以说是所见即所得,单引号里面看到的是什么就会输出什么,即单引号内的内容原样输出。被单引号括起的内容不管是常量还是变量都不会发生替换。
2)、双引号
把双引号内的内容输出来;如果内容中有命令、变量等,会先把变量、命令解析出结果,然后再输出最终内容。双引号是部分引用,被双引号括起的内容常量还是常量,变量则会发生替换,替换成变量内容。
3)、不加引号
不会将含有空格的字符串视为一个整体输出, 如果内容中有变量、命令等,会先把变量、命令解析出结果,然后再输出最终内容。如果字符串中带有空格等特殊字符,则不能完整的输出,需要改加双引号;或者在特殊字符前加转译字符\。一般连续的字符串,数字,路径等可以使用。
4)、使用规则
一般常量用单引号''括起,如果含有变量则用双引号""括起。
##测试,还是以文件file.txt 为例
#1、输出包含 " 的行:
# grep '"' file.txt <==> grep "\"" file.txt <==> grep \" file.txt
Han Meimei:"My name is Han Meimei. What's your name?"
Li Lei:"My name is Li Lei."
Han Meimei:"Nice to meet you."
Li Lei:"Nice to meet you,too."
Poly:"Welcome to Unit 1!"
#2、变量传输
#a='name'
#echo $a 或者 echo ${a}
name
#grep "${a}" file.txt 或者 grep "$a" file.txt (grep '$a' file.txt,grep '${a}' file.txt均不会有行输出)
Han Meimei:"My name is Han Meimei. What's your name?"
Li Lei:"My name is Li Lei."
5、参考
1)、linux命令---grep命令https://blog.csdn.net/llljjlj/article/details/89810340
2)、 shell 正则表达式https://www.cnblogs.com/hb91/p/9969307.html
网友评论