python正则表达式详解 pandas_正则表达式 - python pandas的sep参数问题

问 题

最近想学习利用python的pandas处理apache的大日志，从国外找了一篇文章链接描述，对方用的是sep正则表达式提取数据

pd.read_csv(file_name, sep=r'\s(?=(?:[^"]*"[^"]*")*[^"]*$)(?![^\[]*\])', engine='python', na_values='-', header=None,usecols=[0, 3, 4, 5, 6, 7, 8], names=['ip', 'time', 'request', 'status', 'size', 'referer', 'user_agent'], converters={'time': parse_time, 'request': parse_str, 'status': int, 'size': int, 'referer': parse_str, 'user_agent': parse_str})

apache的日志格式是

192.168.1.106 - - [23/Feb/2017:16:39:00 +0800] "GET / HTTP/1.1" 200 2054 "-" "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.73 Safari/537.36"

得到的结果是

其他参数容易理解，就是sep的正则表达式不大理解，而且好像和python的正则还有点区别，麻烦大神讲解一下这个正则的含义

解决方案

sep参数是用于指定分割符，这个正则的意思是按空格分割，但是排除包括在[]或""中间的空格

扫一扫关注IT屋

微信公众号搜索 “ IT屋 ” ，选择关注与百万开发者在一起