一. 简介

正则表达式本身是一种小型的,高度专业的编程语言,二在Python中,通过内嵌集成re 模块,我们可以直接调用来实现正则匹配.正的表达式模式被编译成一些列的字节码,然后有C编写的匹配引擎执行.
正则表达式是一种字符串搜索和匹配的工具.
友情链接:鬼斧神工之正表达式

二. 正则表达式中常用的字符串

1. 普通字符和11个元字符:

普通字串	匹配自身	abc	abc
.	匹配任意除换行符"\n"外的字符(在DOTALL模式中也能匹配换行符	a.b	abc
\	转义字符,使有一个字符改变原来的意思	a\.c;a\\c	a.c;a\c
*	匹配前一个字符0或多次	abc*	ab;abccc
+	匹配前一个字符1次或无线次	abc+	abc;abccc
?	匹配一个字符0次或1次	abc?	ab;abc
^	匹配字符串开头.在多行匹配每一行的开头	^abc	abc
$	匹配字符末尾,在多行匹配模式中匹配每一行的末尾	abc$	abc
|	或. 匹配|左右表达式任意一个,从左到右匹配,如果|没有包括在()中,则它的范围是整个正则表达式	abc|def	abc def
{}	{m}匹配前一个字符m次,{m,n}匹配前一个字符m至n次,若省略n,则匹配m至无限次	ab{1,2}c	abc abbc
[]	字符集.对应的位置可以是字符集中任意字符.字符集中的字符的字符可以逐个列出,也可以给出范围,如[abc]或[a-c],[^abc]表示取反,即非abc,所有特殊字符在字符集中都失去其原有的特殊含义.用\反斜杠转义恢复特殊字符的特殊含义	a[bcd]e	abe ace ade
()	被括起来的表达式将作为分组,从表达式左边开始没没遇到一个分组的左括号"(",编号+1.分组表达式作为一个整体,可以后接数量词.表达式中的|仅在该组中有效.	(abc){2}/a(123|456)c	abcabc/a456c

这里需要强调一下反斜杠\的作用

• 反斜杠后边根元字符去除特殊功能;(即将特殊字符转移成普通字符)
• 反斜杠后边跟普通字符实现特殊功能;(即预定义字符)
• 引用序号对应的字组所匹配的字符串.

import re 
a = re.search(r'(tina)(fei)haha\2','tinafeihahafei tinafihahatina').group()
print("结果:",a)
================
结果: tinafeihahafei

2. 预定义字符集(可以写在字符集[...]中)

字符集	含义	示例	结果
\d	数字:[0-9]	a\dc	a1c
\D	非数字:[^\d]	a\Dc	abc
\s	匹配任何空白字符:[<空格>\t\r\n\f\v]	a\sc	a c
\S	非空白字符:[^\s]	a\Sc	abc
\w	匹配包括下划线在内的任何字符(数字,字母,下划线):[A-Za-z0-9_]	a\wc	abc
\W	匹配非字符字母字符,即匹配特殊字符	a\Wc	a c
\A	仅匹配字符串开头,同^	\Aabc	abc
\Z	仅匹配字符串结尾,同$	abc\Z	abc
\b	匹配\w和\W之间,即匹配一个单词边界,也就是指单词和空格间的位置.例如,'er\b'可以匹配"never"中的'er',但不能匹配"verb"中的'er'.	\babc\b a\b!bc	空格abc空格 a!bc
\B	[^\b]	a\Bbc	abc

# 这里强调一下\b的单词边界的理解:
import re 
w = re.findall('\btina','tian tinaaaa')
print("结果是:",w)
s = re.findall(r'\btina','tian tinaaaa')
print("结果是:",s)
v = re.findall(r'\btina','tian#tianaaaa')
print("结果是:",v)
a = re.findall(r'\btina\b','tian#tina@aaa')
print("结果是:",a)
==================
结果是: []
结果是: ['tina']
结果是: ['tina']
结果是: ['tina']

3. 特殊分组用法:

特殊分组	含义	用法示例	结果
(?P<name>)	分组,除了原有的编号外再指定一个额外的别名	(?P<id>abc){2}	abcabc
(?P=name)	引用别名为<name>的分组匹配到字符串	(?P<id>\d)abc(?P=id)	1abc1 5abc5
<number>	引用编号为<number>的分组匹配到字符串	(\d)abc\1	1abc1 5abc5

三. re模块中常用的功能函数

1. compile()

编译正则表达式模式,返回一个对象的模式.(可以吧那些常用的正则表达式编译成正则表达式对象,这样可以提高效率.)

• 格式:
  re.compile(pattern,flags=0)
  pattern:编译时用的表达式字符串
  flags 编译标志位,用于修改正则表达式的匹配方式,如:是否区分大小写,多行匹配等.常用的flags有:

标志	含义
re.S(DOTALL)	使.匹配包括换行符在内的所有字符
re.I (IGNOTECASE)	使匹配对大小写不敏感
re.L (LOCALE)	做本地化识别(local-aware匹配,语法等)
re.M(MULTILINE)	多行匹配,影响^和$
re.X(VERBOSE)	该标志通过给予更灵活的格式写得更易于理解
re.U	根据Unicode字符集解析字符,这个标志影响\w,\W,\b,\B

import re 
tt = "Tom is a good boy, he is cool,clever,and so on ..."
rr = re.compile(r'\w*oo\w*')
print("执行结果是:",rr.findall(tt))   # 查找所有包含'oo'的单词
================
执行结果是: ['good', 'cool']

2. match()

决定RE是否在字符串刚开始的位置匹配. //注:这个方法并不是完全匹配.当pattern结束时若string还有剩余字符,仍然是为成功.想要完全匹配,可以在表达式末尾加上边界匹配字符'$'

• 格式"
  re.match(pattern,stting,flags=0)

import re 
a = re.match('com','comwww.runcomoob').group()
print("a的结果是:",a)
b = re.match('com','Comwww.baidu',re.I)
print("b的结果是:",b)   # re.I 对大小写不敏感
========================
a的结果是: com
b的结果是: Com

3. search()

re.search() 函数会在字符串内查找模式匹配,只要找到第一个匹配然后返回,如果没有找到匹配,则返回None.

• 格式:
  re.search(pattern,strint,flags=0)

import re 
a = re.search('\dcom','www.4comrnuoob.5com').group()
print("a的结果是:",a)
b  = re.search('com','python.org')
print("b的结果是:",b)
===================
a的结果是: 4com
b的结果是: None

• 注: match和search一旦匹配成功,就是一个match object对象,而match object对象有以下方法:
  • group() 返回被RE匹配的字符串
  • start() 返回匹配开始的位置
  • end() 返回匹配结束的位置
  • span() 返回一个元组包含匹配(开始,结束)的位置.
  • group() 返回re整体匹配的字符串,可以一次输入多个组号,对应组号匹配的字符串.
    a.group() 返回re整体匹配的字符串
    b.group(n,m) 返回组号为n,m所匹配的字符串,如果不存在,则返回indexError异常
    c.group() group方法返回一个包含正则表达式中所有小组字符串的元组,从1到所含的小组号,通常group()不需要参数,返回一个元组,元组中的元就是正则表达式中定义的组.

import re 
a = "123abc456"
r = re.search('([0-9]*)([a-z]*)([0-9]*)',a)
print("r.group(0)的结果",r.group(0))
print("r.group(1)的结果",r.group(1))
print("r.group(2)的结果",r.group(2))
print("r.group(3)的结果",r.group(3)) 
#group(1) 列出第一个括号匹配部分，group(2) 列出第二个括号匹配部分，group(3) 列出第三个括号匹配部分。
=======================
r.group(0)的结果 123abc456
r.group(1)的结果 123
r.group(2)的结果 abc
r.group(3)的结果 456

4 . finfall()

re.findall 遍历匹配,可以获取字符串中所有的字符串,返回一个列表.

• 格式:
  re.findall(pattern,string,flags=0)

import re 
p = re.compile(r'\d+')
r = p.findall('o1n2m3k4')
print("匹配的结果是:",r)
============
匹配的结果是: ['1', '2', '3', '4']

import re 
tt = "Jack is a good boy, he is cool,clever,and so on .... "
rr = re.compile(r'\w*oo\w*')
print("rr.findall(tt)匹配的结果是:",rr.findall(tt))
print("re.findall(r'(\w)*oo(\w)')匹配的结果是:",re.findall(r'(\w)*oo(\w)',tt))
==================
rr.findall(tt)匹配的结果是: ['good', 'cool']
re.findall(r'(\w)*oo(\w)')匹配的结果是: [('g', 'd'), ('c', 'l')]

5. finditer()

搜索string,返回一个顺序访问每一个匹配结果(Match对象)的迭代器.找到RE匹配的所有字符串,并把他们作为一个迭代器返回.

• 格式:
  re.finditer(pattern,strint,flags=0)

import re 
iter = re.finditer(r'\d+','12 drumm44ers drumming,11 ... 10 ...  ')
for i in iter:
    print("匹配结果是:",i)
    print("i.group()匹配结果是:",i.group())
    print("i.span()匹配结果是:",i.span())
==========================================
匹配结果是: <_sre.SRE_Match object; span=(0, 2), match='12'>
i.group()匹配结果是: 12
i.span()匹配结果是: (0, 2)
匹配结果是: <_sre.SRE_Match object; span=(8, 10), match='44'>
i.group()匹配结果是: 44
i.span()匹配结果是: (8, 10)
匹配结果是: <_sre.SRE_Match object; span=(23, 25), match='11'>
i.group()匹配结果是: 11
i.span()匹配结果是: (23, 25)
匹配结果是: <_sre.SRE_Match object; span=(30, 32), match='10'>
i.group()匹配结果是: 10
i.span()匹配结果是: (30, 32)

6. split()

按照能够匹配的字符串将string分割后返回列表.
可以使用re.split来分割字符串,如:re.split(r'\s','text');将字符串按空格分割成一个单词列表.

• 格式:
  re.split(pattern,string[,maxsplit])
  maxsplit用于指定最大分割次数,不指定将全部分割.

import re 
rr = re.split('\d+','one1two2three3four4five5')
print("rr匹配的结果是:",rr)
wrr = re.split('[a-z]+','one1two2three3four4five5')
print("wrr匹配的结果是:",wrr)
================================
rr匹配的结果是: ['one', 'two', 'three', 'four', 'five', '']
wrr匹配的结果是: ['', '1', '2', '3', '4', '5']

7. sub()

使用re替换string中每一个匹配的字符串后返回替换后的字符串.

• 格式:
  re.sub(pattern,repl,string,count)
  repl:是用什么字符串替换(替换后的字符串)
  count:指的是替换的个数,默认为0,表示每个都替换.

import re
text = "JGood is a handsome boy, he is cool, clever, and so on..."
rr = re.sub(r'\s+','-',text)
print("替换后的结果是:",rr)
========================
替换后的结果是: JGood-is-a-handsome-boy,-he-is-cool,-clever,-and-so-on...

re.sub还允许使用函数对匹配项的替换进行复杂的处理.
如:re.sub(r'\s',lambda m:'['+ m.group(0) +']',text,0);将字符串中的空格' '替换为'[]'.

import re 
text  = "JGood is a handsome boy, he is cool, clever, and so on..."
rr = re.sub(r'\s',lambda m:'['+ m.group(0) +']',text,0)
print("替换后的结果是:",rr)
===========================
替换后的结果是: JGood[ ]is[ ]a[ ]handsome[ ]boy,[ ]he[ ]is[ ]cool,[ ]clever,[ ]and[ ]so[ ]on...

8. subn()

返回替换次数

• 格式:

import re
tt = '123456abcdef'
rr = re.subn('[1-2]','A',tt)
rr1 = re.sub("g.t","have",'I get A,I get B,I get C')
rr2 = re.subn("g.t","have",'I get A,I get B,I get C')
=====================
re.subn()匹配的结果: ('AA3456abcdef', 2)
re.sub()匹配的结果: I have A,I have B,I have C
re.subn()匹配的结果: ('I have A,I have B,I have C', 3)

四. 一些注意点

1. re.match与re.search与re.findall的区别:

re.match只匹配字符串的开始,如果字符串开始不符合正则表达式,则匹配失败,函数返回None;而re.search匹配整个字符串,知道找到一个匹配.

import re 
a = re.search('[\d]','abc33').group()
print("a匹配的结果是:",a)
p = re.match('[\d]','abc33')
print("p匹配的结果是:",p)
b = re.findall('[\d]','abc33')
print("b匹配的结果是:",b)
============================
a匹配的结果是: 3
p匹配的结果是: None
b匹配的结果是: ['3', '3']

2. 贪婪匹配与非贪婪匹配

?,+?,??,{m,n}? 前面的,+,?等都是贪婪匹配,也就是尽可能匹配,后面加?号使其边城惰性匹配

• 示例一

import re
a = re.findall('a(\d+?)','a23b')
print("a惰性匹配的结果:",a)
b = re.findall('a(\d+)','a23b')
print("b贪恋匹配的结果:",b)
==========================
a惰性匹配的结果: ['2']
b贪恋匹配的结果: ['23']

• 示例二

import re 
a = re.match('<(.*)>','<H1>title</H1>').group()
print("a是贪婪匹配的结果:",a)
b = re.match('<(.*?)>','<H1>title</H1>').group()
print("b是惰性匹配的结果:",b)
==============================
a是贪婪匹配的结果: <H1>title</H1>
b是惰性匹配的结果: <H1>

• 示例三
  这里需要注意的是如果前后均有限定条件的时候，就不存在什么贪婪模式了，非匹配模式失效。

import re 
a = re.findall(r'a(\d+)b','a33333b')
print("a是贪婪匹配的结果:",a)
b = re.findall(r'a(\d+?)b','a33333b')
print("b是惰性匹配的结果:",b)
====================
a是贪婪匹配的结果: ['33333']
b是惰性匹配的结果: ['33333']

3. 用flags时遇到的小坑

import re
rr = re.split('a','1A1a2A3',re.I)
print("rr输出的结果是:",rr)
================
rr输出的结果是: ['1A1', '2A3']

输出的结果冰未能区分大小写,这是因为re.split(pattern，string，maxsplit,flags)默认是四个参数，当我们传入的三个参数的时候，系统会默认re.I是第三个参数，所以就没起作用。如果想让这里的re.I起作用，写成flags=re.I即可。

import re
rr = re.split('a','1A1a2A3',flags=re.I)
print("rr输出的结果是:",rr)
=================
rr输出的结果是: ['1', '1', '2', '3']

五. 正则匹配的小实践

1. 匹配电话号码

import re
# 方法一:
phone_pat = re.compile('^(13\d|14[5|7]|15\d|166|17[3|6|7]|18\d)\d{8}$')
while True:
    phone = input('请输入你的电话号码:')
    res = re.search(phone_pat,phone)
    if res:
       print('正常手机号')
    else:
       print('不是手机号')
# 方法二
tel_pat = re.compile('^0\d[0-9]{2}|[0-9]{3}-\d[0-9]{8}|[0-9]{7}')
while True:
    tel = input('请输入你的座机号:')
    res = re.search(tel_pat,tel)
    # res1 = re.search(tel_pat1,tel)
    if res:
       print('格式正确')
    else:
        print('格式不正确')

2. 匹配IP:

import re 
re.search(r"(([01]?\d?\d|2[0-4]\d|25[0-5])\.){3}([01]?\d?\d|2[0-4]\d|25[0-5]\.)","192.168.1.1")

3. 匹配邮箱:

import re  
text = input("Please input your Email address：\n")  
if re.match(r'^[0-9a-zA-Z_]{0,19}@[0-9a-zA-Z]{1,13}\.[com,cn,net]{1,3}$',text):  
#if re.match(r'[0-9a-zA-Z_]{0,19}@163.com',text):  
    print('Email address is Right!')  
else:  
    print('Please reset your right Email address!')