python 正则表达式

正则表达式是一个特殊的字符序列，它能帮助你方便的检查一个字符串是否与某种模式匹配。

python 自1.5版本起增加了re 模块，它提供 perl 风格的正则表达式模式。

re 模块使 python 语言拥有全部的正则表达式功能。

compile 函数根据一个模式字符串和可选的标志参数生成一个正则表达式对象。该对象拥有一系列方法用于正则表达式匹配和替换。

re 模块也提供了与这些方法功能完全一致的函数，这些函数使用一个模式字符串做为它们的第一个参数。

本章节主要介绍python中常用的正则表达式处理函数。

1. re.match函数

re.match 尝试从字符串的起始位置匹配一个模式，如果不是起始位置匹配成功的话，match()就返回none。

函数语法：

re.match(pattern, string, flags=0)

函数参数说明：

匹配成功re.match方法返回一个匹配的对象，否则返回none。

我们可以使用group(num) 或 groups() 匹配对象函数来获取匹配表达式。

范例如下：

#!/usr/bin/python
# -*- coding: utf-8 -*- 
 
import re
print(re.match('www', 'www.yapf.com').span())  # 在起始位置匹配
print(re.match('com', 'www.yapf.com'))         # 不在起始位置匹配

以上实例运行输出结果为：

(0, 3)
none

#!/usr/bin/python
import re
 
line = "cats are smarter than dogs"
 
matchobj = re.match( r'(.*) are (.*?) .*', line, re.m|re.i)
 
if matchobj:
   print "matchobj.group() : ", matchobj.group()
   print "matchobj.group(1) : ", matchobj.group(1)
   print "matchobj.group(2) : ", matchobj.group(2)
else:
   print "no match!!"

以上实例执行结果如下：

matchobj.group() :  cats are smarter than dogs
matchobj.group(1) :  cats
matchobj.group(2) :  smarter

2. re.search方法

re.search 扫描整个字符串并返回第一个成功的匹配。

函数语法：

re.search(pattern, string, flags=0)

函数参数说明：

匹配成功re.search方法返回一个匹配的对象，否则返回none。

我们可以使用group(num) 或 groups() 匹配对象函数来获取匹配表达式。

#!/usr/bin/python
# -*- coding: utf-8 -*- 
 
import re
print(re.search('www', 'www.yapf.com').span())  # 在起始位置匹配
print(re.search('com', 'www.yapf.com').span())         # 不在起始位置匹配

以上实例运行输出结果为：

(0, 3)
(14, 17)

#!/usr/bin/python
import re
 
line = "cats are smarter than dogs";
 
searchobj = re.search( r'(.*) are (.*?) .*', line, re.m|re.i)
 
if searchobj:
   print "searchobj.group() : ", searchobj.group()
   print "searchobj.group(1) : ", searchobj.group(1)
   print "searchobj.group(2) : ", searchobj.group(2)
else:
   print "nothing found!!"

以上实例执行结果如下：

searchobj.group() :  cats are smarter than dogs
searchobj.group(1) :  cats
searchobj.group(2) :  smarter

3. re.match 与 re.search 的区别

re.match只匹配字符串的开始，如果字符串开始不符合正则表达式，则匹配失败，函数返回none；而re.search匹配整个字符串，直到找到一个匹配。

#!/usr/bin/python
import re
 
line = "cats are smarter than dogs";
 
matchobj = re.match( r'dogs', line, re.m|re.i)
if matchobj:
   print "match --> matchobj.group() : ", matchobj.group()
else:
   print "no match!!"
 
matchobj = re.search( r'dogs', line, re.m|re.i)
if matchobj:
   print "search --> searchobj.group() : ", matchobj.group()
else:
   print "no match!!"

以上实例运行结果如下：

no match!!
search --> searchobj.group() :  dogs

4. 检索和替换

python 的 re 模块提供了re.sub用于替换字符串中的匹配项。

语法：

re.sub(pattern, repl, string, count=0, flags=0)

参数：

• pattern : 正则中的模式字符串。
• repl : 替换的字符串，也可为一个函数。
• string : 要被查找替换的原始字符串。
• count : 模式匹配后替换的最大次数，默认 0 表示替换所有的匹配。

#!/usr/bin/python
# -*- coding: utf-8 -*-
 
import re
 
phone = "2004-959-559 # 这是一个国外电话号码"
 
# 删除字符串中的 python注释 
num = re.sub(r'#.*$', "", phone)
print "电话号码是: ", num
 
# 删除非数字(-)的字符串 
num = re.sub(r'\d', "", phone)
print "电话号码是 : ", num

以上实例执行结果如下：

电话号码是:  2004-959-559 
电话号码是 :  2004959559

1) repl 参数是一个函数

以下实例中将字符串中的匹配的数字乘以 2：

#!/usr/bin/python
# -*- coding: utf-8 -*-
 
import re
 
# 将匹配的数字乘以 2
def double(matched):
    value = int(matched.group('value'))
    return str(value * 2)
 
s = 'a23g4hfd567'
print(re.sub('(?p<value>\d+)', double, s))

执行输出结果为：

a46g8hfd1134

2) re.compile 函数

compile 函数用于编译正则表达式，生成一个正则表达式（ pattern ）对象，供 match() 和 search() 这两个函数使用。

语法格式为：

re.compile(pattern[, flags])

参数：

• pattern : 一个字符串形式的正则表达式
• flags : 可选，表示匹配模式，比如忽略大小写，多行模式等，具体参数为：
• re.i 忽略大小写
• re.l 表示特殊字符集 \w, \w, \b, \b, \s, \s 依赖于当前环境
• re.m 多行模式
• re.s 即为 . 并且包括换行符在内的任意字符（. 不包括换行符）
• re.u 表示特殊字符集 \w, \w, \b, \b, \d, \d, \s, \s 依赖于 unicode 字符属性数据库
• re.x 为了增加可读性，忽略空格和 # 后面的注释

>>>import re
>>> pattern = re.compile(r'\d+')                    # 用于匹配至少一个数字
>>> m = pattern.match('one12twothree34four')        # 查找头部，没有匹配
>>> print m
none
>>> m = pattern.match('one12twothree34four', 2, 10) # 从'e'的位置开始匹配，没有匹配
>>> print m
none
>>> m = pattern.match('one12twothree34four', 3, 10) # 从'1'的位置开始匹配，正好匹配
>>> print m                                         # 返回一个 match 对象
<_sre.sre_match object at 0x10a42aac0>
>>> m.group(0)   # 可省略 0
'12'
>>> m.start(0)   # 可省略 0
3
>>> m.end(0)     # 可省略 0
5
>>> m.span(0)    # 可省略 0
(3, 5)

在上面，当匹配成功时返回一个 match 对象，其中：

• group([group1, …]) 方法用于获得一个或多个分组匹配的字符串，当要获得整个匹配的子串时，可直接使用 group() 或 group(0)；
• start([group]) 方法用于获取分组匹配的子串在整个字符串中的起始位置（子串第一个字符的索引），参数默认值为 0；
• end([group]) 方法用于获取分组匹配的子串在整个字符串中的结束位置（子串最后一个字符的索引+1），参数默认值为 0；
• span([group]) 方法返回 (start(group), end(group))。

再看看一个例子：

>>>import re
>>> pattern = re.compile(r'([a-z]+) ([a-z]+)', re.i)   # re.i 表示忽略大小写
>>> m = pattern.match('hello world wide web')
>>> print m                               # 匹配成功，返回一个 match 对象
<_sre.sre_match object at 0x10bea83e8>
>>> m.group(0)                            # 返回匹配成功的整个子串
'hello world'
>>> m.span(0)                             # 返回匹配成功的整个子串的索引
(0, 11)
>>> m.group(1)                            # 返回第一个分组匹配成功的子串
'hello'
>>> m.span(1)                             # 返回第一个分组匹配成功的子串的索引
(0, 5)
>>> m.group(2)                            # 返回第二个分组匹配成功的子串
'world'
>>> m.span(2)                             # 返回第二个分组匹配成功的子串
(6, 11)
>>> m.groups()                            # 等价于 (m.group(1), m.group(2), ...)
('hello', 'world')
>>> m.group(3)                            # 不存在第三个分组
traceback (most recent call last):
  file "<stdin>", line 1, in <module>
indexerror: no such group

3) findall

在字符串中找到正则表达式所匹配的所有子串，并返回一个列表，如果没有找到匹配的，则返回空列表。

注意： match 和 search 是匹配一次 findall 匹配所有。

语法格式为：

findall(string[, pos[, endpos]])

参数：

• string : 待匹配的字符串。
• pos : 可选参数，指定字符串的起始位置，默认为 0。
• endpos : 可选参数，指定字符串的结束位置，默认为字符串的长度。

查找字符串中的所有数字：

# -*- coding:utf8 -*-
 
import re
 
pattern = re.compile(r'\d+')   # 查找数字
result1 = pattern.findall('yapf 123 google 456')
result2 = pattern.findall('run88oob123google456', 0, 10)
 
print(result1)
print(result2)

输出结果：

['123', '456']
['88', '12']

4) re.finditer

和 findall 类似，在字符串中找到正则表达式所匹配的所有子串，并把它们作为一个迭代器返回。

re.finditer(pattern, string, flags=0)

参数：

# -*- coding: utf-8 -*-
 
import re
 
it = re.finditer(r"\d+","12a32bc43jf3") 
for match in it: 
    print (match.group() )

输出结果：

12 
32 
43 
3

5) re.split

split 方法按照能够匹配的子串将字符串分割后返回列表，它的使用形式如下：

re.split(pattern, string[, maxsplit=0, flags=0])

参数：

>>>import re
>>> re.split('\w+', 'yapf, yapf, yapf.')
['yapf', 'yapf', 'yapf', '']
>>> re.split('(\w+)', ' yapf, yapf, yapf.') 
['', ' ', 'yapf', ', ', 'yapf', ', ', 'yapf', '.', '']
>>> re.split('\w+', ' yapf, yapf, yapf.', 1) 
['', 'yapf, yapf, yapf.']
 
>>> re.split('a*', 'hello world')   # 对于一个找不到匹配的字符串而言，split 不会对其作出分割
['hello world']

5. 正则表达式对象

1) re.regexobject

re.compile() 返回 regexobject 对象。

2) re.matchobject

group() 返回被 re 匹配的字符串。

• start() 返回匹配开始的位置
• end() 返回匹配结束的位置
• span() 返回一个元组包含匹配 (开始,结束) 的位置

6. 正则表达式修饰符 - 可选标志

正则表达式可以包含一些可选标志修饰符来控制匹配的模式。修饰符被指定为一个可选的标志。多个标志可以通过按位 or(|) 它们来指定。如 re.i | re.m 被设置成 i 和 m 标志：

7. 正则表达式模式

模式字符串使用特殊的语法来表示一个正则表达式：

字母和数字表示他们自身。一个正则表达式模式中的字母和数字匹配同样的字符串。

多数字母和数字前加一个反斜杠时会拥有不同的含义。

标点符号只有被转义时才匹配自身，否则它们表示特殊的含义。

反斜杠本身需要使用反斜杠转义。

由于正则表达式通常都包含反斜杠，所以你最好使用原始字符串来表示它们。模式元素(如 r'\t'，等价于 '\\t')匹配相应的特殊字符。

下表列出了正则表达式模式语法中的特殊元素。如果你使用模式的同时提供了可选的标志参数，某些模式元素的含义会改变。

8. 正则表达式实例

1) 字符匹配

2) 字符类

3) 特殊字符类