python爬虫学习之正则表达式的基本使用
2024-10-09 10:08:37
一、正则表达式
1. 正则表达式是字符串处理的有力工具和技术。
2. 正则表达式使用某种预定义的模式去匹配一类具有共同特征的字符串,主要用于处理字符串,可以快速、准确地完成复杂的查找、替换等处理要求,在文本编辑与处理、网页爬虫之类的场合中有重要应用。
3. Python中,re模块提供了正则表达式操作所需要的功能。
二、正则表达式语法
使用示例:
- 最简单的正则表达式是普通字符串,可以匹配自身
- '[pjc]ython'可以匹配'python'、'jython'、'cython'
- '[a-zA-Z0-9]'可以匹配一个任意大小写字母或数字
- '[^abc]'可以一个匹配任意除'a'、'b'、'c'之外的字符
- 'python|perl'或'p(ython|erl)'都可以匹配'python'或'perl'
- 子模式后面加上问号表示可选。r'(http://)?(www\.)?python\.org'只能匹配'http://www.python.org'、'http://python.org'、'www.python.org'和'python.org'
- '^http'只能匹配所有以'http'开头的字符串
- (pattern)*:允许模式重复0次或多次
- (pattern)+:允许模式重复1次或多次
- (pattern){m,n}:允许模式重复m~n次
- '(a|b)*c':匹配多个(包含0个)a或b,后面紧跟一个字母c。
- 'ab{1,}':等价于'ab+',匹配以字母a开头后面带1个至多个字母b的字符串。
- '^[a-zA-Z]{1}([a-zA-Z0-9._]){4,19}$':匹配长度为5-20的字符串,必须以字母开头并且可带字母、数字、“_”、“.”的字符串。
- '^(\w){6,20}$':匹配长度为6-20的字符串,可以包含字母、数字、下划线。
- '^\d{1,3}\.\d{1,3}\.\d{1,3}\.\d{1,3}$':检查给定字符串是否为合法IP地址。
- '^(13[4-9]\d{8})|(15[01289]\d{8})$':检查给定字符串是否为移动手机号码。
- '^[a-zA-Z]+$':检查给定字符串是否只包含英文字母大小写。
- '^\w+@(\w+\.)+\w+$':检查给定字符串是否为合法电子邮件地址。
- r'(\w)(?!.*\1)':查找字符串中每个字符的最后一次出现。
- r'(\w)(?=.*\1)':查找字符串中所有重复出现的字符
- '^(\-)?\d+(\.\d{1,2})?$':检查给定字符串是否为最多带有2位小数的正数或负数。
- '[\u4e00-\u9fa5]':匹配给定字符串中所有汉字。
- '^\d{18}|\d{15}$':检查给定字符串是否为合法身份证格式。
- '\d{4}-\d{1,2}-\d{1,2}':匹配指定格式的日期,例如2016-1-31。
- '^(?=.*[a-z])(?=.*[A-Z])(?=.*\d)(?=.*[,._]).{8,}$':检查给定字符串是否为强密码,必须同时包含英语字母大写字母、英文小写字母、数字或特殊符号(如英文逗号、英文句号、下划线),并且长度必须至少8位。
- "(?!.*[\'\"\/;=%?]).+":如果给定字符串中包含’、”、/、;、=、%、?则匹配失败。
- '(.)\\1+':匹配任意字符的一次或多次重复出现。
- '((?P<f>\b\w+\b)\s+(?P=f))':匹配连续出现两次的单词。
- '((?P<f>.)(?P=f)(?P<g>.)(?P=g))':匹配AABB形式的成语或字母组合。
三、re模块主要方法
正则表达式对象的match方法和search方法匹配成功后返回match对象。match对象的主要方法有:
- group():返回匹配的一个或多个子模式内容
- groups():返回一个包含匹配的所有子模式内容的元组
- groupdict():返回包含匹配的所有命名子模式内容的字典
- start():返回指定子模式内容的起始位置
- end():返回指定子模式内容的结束位置的前一个位置
- span():返回一个包含指定子模式内容起始位置和结束位置前一个位置的元组。
最新文章
- 使用Spring发送带附件的电子邮件(站内和站外传送)
- 100114G
- 火狐----此地址使用了一个通常用于网络浏览以外的端口。出于安全原因,Firefox 取消了该请求。
- 多重背包问题II
- 微信ios版6.2更新 聊天记录迁移更快捷朋友圈可翻译
- PAT-1041 Be Unique
- TLD算法原理2--学习理解之(三)
- 自定义控制台程序导出角色对实体的权限为Excel文件
- Django web框架-----win10搭建django2.1.7开发环境,定义简易视图及网址
- [Hive_add_5] Hive 的 join 操作
- forever start app.js 启动node时,服务访问一次后第二次就不能访问了
- 【bzoj1507】 JSOI2008—Blue Mary的旅行
- Shell脚本编程基础笔记一
- Asp.net中DataTable的排序功能
- Thinkphp5.0分页和跳页
- 20155204《网络对抗》Exp 6 信息搜集与漏洞扫描
- 并发编程(二)concurrent 工具类
- INFINITY的一个坑
- java.lang.OutOfMemoryError: Java heap space 解决方法
- col标签的相关实验