之前工作在hive中会使用regxep代替re方法匹配字符串，利用Python的re模块也可以实现很多功能，需要在需求中慢慢掌握。今天需要记录的是使用re模块从日志数据中抽取出对应字段的值，是数据清洗很常见的工具。在之前的面试中有要求抽取数据，当时看到字段是{}组成，一直往字典方向思考。其实用re就能很快处理好。 re的常见命令：一、re通配符'.*?"Date":"(.*?)","'&
转载
2023-07-06 14:20:52
152阅读
首先查看下面的代码：1 #!/usr/bin/python
2 # -*- coding: UTF-8 -*-
3
4 import re
5
6
7 test_line = r'ab123abcABC456def789ggh' # 定义一个字符串变量test_line
8 aa = re.match(r'(?i
转载
2023-06-29 11:36:31
184阅读
一、反射
python 中用字符串的方式操作对象的相关属性，python 中一切皆对象，都可以使用反射
用eval 有安全隐患，用 反射就很安全
1.反射对象中的属性和方法 class A:
a_class = '反射类静态属性'
@classmethod
def func_class(cls):
return '反射类方法'
def __
转载
2023-12-06 22:53:26
82阅读
Python中re模块总结一、正则表达式（Regular Expression）介绍二、常用匹配方法三、具体应用search查找findall查找sub替换四、常用正则表达式总结 附：Mysql安装及常用命令合集附带python操作mysql方法和Navicat工具安装教程还会继续写，闲时慢慢更新笔记一、正则表达式（Regular Expression）介绍1.定义：能让计算机读懂的字符串匹配规
转载
2023-11-06 21:28:42
78阅读
1、re.findall正则 re.findall 的简单用法（返回string中所有与pattern相匹配的全部字串，返回形式为数组）
语法：findall(pattern, string, flags=0)import re
Python 正则表达式 re findall 方法能够以列表的形式返回能匹配的子串findall查找全部r标识代表后面是正则的语句regular_v1 =
转载
2023-10-30 20:06:32
191阅读
>>> url="http://apk.gfan.com/Product/App45021.html" >>> result=html.content Traceback (most recent call last): File "", line 1, in NameError: name 'html' is not defined >>> html=requests.get(url) >>> result=html.content >>> pat
转载
2013-07-31 20:12:00
203阅读
2评论
re模块常用正则表达式符号'.' 默认匹配除\n之外的任意一个字符，若指定flagDOTALL,则匹配任意字符，包括换行'^'匹配字符开头，若指定flagsMULTILINE,这种也可以匹配上(r"^a","\nabc\neee",flags=re.MULTILINE)'$' 匹配字符结尾，或e.search("foo$","bfoo\nsdfsf",flags=re.MULTILIN
原创
2017-05-02 10:10:46
435阅读
. 可以匹配任何字符（除了
原创
2023-07-31 17:28:21
107阅读
在匹配多个模式的时候，可以使用或表达式和多行匹配方法来实现。
转载
2023-06-09 11:05:59
551阅读
目录一、正则表达式模式1、元字符之: . \ [] |2、预定义字符集3、数量词4、边界匹配5、元字符之：分组 ()6、再说字符集 [] [^]7、再说转义字符8、贪婪匹配 和 懒惰匹配二、re 模块1、常量2、常用方法 (1) re.compile(pattern，flags = 0) (2) re.searc
转载
2023-10-24 05:52:23
70阅读
应用场景：处理大量数据（14W条数据）进行批量插入数据库操作，如果14W条数据直接进行插入会导致数据库服务器CPU负载过大、出现慢日志，解决的方法就是对这个字典进行分割，分组去进行插入。 将14W条数据（dict 字典）转为列表（list），列表中的每一组都还是字典，每组150条数据。python对字典数据进行分组：# 对字典进行分割
def dict_chunk(self, dic
转载
2023-05-27 09:59:01
113阅读
正则表达式通用python正则表达式，依赖python中 re 模块re模块python 自带不用安装import re # 使用前得导入模块1. match () 函数# 从起始位置开始匹配
re.match ( pattern, string, flags=0)
# 返回对象， group() 取值参数：patter : 匹配的正则表达式string : 要匹配的字符串flags： 标志
转载
2023-09-09 08:49:02
149阅读
正则表达式是一个特殊的字符序列，它能帮助你方便的检查一个字符串是否与某种模式匹配。python中使用re模块进行正则表达式处理。compile 函数用于编译正则表达式，生成一个正则表达式（ Pattern ）对象。语法格式为：compile(pattern, flags=0):参数：pattern : 一个字符串形式的正则表达式flags 可选，表示匹配模式，比如忽略大小写，多行模式等，具体参数为
转载
2023-06-20 14:14:58
111阅读
Python re库使用教程Python中的re库是一个强大的正则表达式处理工具。正则表达式是一种语法规则，用于匹配和处理文本字符串。Python中的re模块提供了一组函数，用于在Python中处理正则表达式。安装re库在大多数情况下，re库已经包含在Python的标准库中，因此您不需要进行任何安装即可使用它。如果您使用的是较早版本的Python，则需要手动安装该库。您可以使用以下命令安装re库：
转载
2023-09-21 09:02:18
188阅读
Python中，re模块中的match和search的区别解析。match:从头开始匹配内容，要么第一个就符合要求，否则不符合.search:匹配整个字符串，直到找到一个匹配。一、match:re.match(规则，目标，[匹配模式])函数;可以使用group方法获取匹配的数据；可以使用span方法获取匹配数据的下标；看代码：（匹配不到）import re
line = "Cats are sm
转载
2023-07-02 19:10:01
136阅读
regular expression / regex / RE正则表达式是一个特殊的字符序列，它能帮助你方便的检查一个字符串是否与某种模式匹配。Python 自1.5版本起增加了re 模块，它提供 Perl 风格的正则表达式模式。re 模块使 Python 语言拥有全部的正则表达式功能。compile 函数根据一个模式字符串和可选的标志参数生成一个正则表达式对象。该对象拥有一系列方法用于正则表达式
转载
2023-07-17 21:26:55
16阅读
由于 需求原因，需要匹配 提取中文，大量google下，并没有我需要的。花了一个小时大概测试，此utf8中文通过，特留文。
首先，确保所有编码都为 unicode
比如 str.decode('utf8') #从utf8文本中
u"啊l" #在控制台输出中
转载
2023-07-10 16:40:44
26阅读
Python的re模块#预备知识点#正则表达式regex#特殊符号和字符 ---> 元字符
正则表达式基础知识
通配符含义正则示例匹配结果reg1 | reg2匹配正则表达式reg1或reg2foo | barfoo.匹配任何字符(\n除外)a.aabc^匹配字符串起始部分^aab....$匹配字符串终止部分.txt$a.txt*匹配0次或者多次前面出现的正
转载
2023-07-27 23:14:05
0阅读
一、正则表达式re模块是python独有的匹配字符串的模块，该模块中提供的很多功能是基于正则表达式实现的，而正则表达式是对字符串进行模糊匹配，提取自己需要的字符串部分，他对所有的语言都通用。注意：re模块是python独有的正则表达式所有编程语言都可以使用re模块、正则表达式是对字符串进行操作因为，re模块中的方法大都借助于正则表达式，故先学习正则表达式。接下来我所有函数里面的参数解释如下：pat
转载
2023-08-20 20:26:22
0阅读
主要函数：match()、search()、compile()re.compilecompile 函数用于编译正则表达式，生成一个正则表达式( Pattern )对象，供 match() 和 search() 这两个函数使用。语法格式为：re.compile(pattern[, flags])参数：pattern : 一个字符串形式的正则表达式flags : 可选，表示匹配模式，比如忽略大小写，多
转载
2023-10-22 22:47:31
49阅读
