- 博客(12)
- 收藏
- 关注
RSS订阅原创 关于字符串的一些操作
#去掉 空格 \tnew_string2 = ‘fasdf dsff \tfafafa\tfafda’print(new_string2.split())
2019-01-18 11:11:25
152
原创 monog-find
db.getCollection(‘hongqing-116’).find({company_name:‘重庆球球商贸有限公司’})
2019-01-16 14:26:22
247
原创 fake-useragent
1.fake-useragentpip install fake_useragentfrom fake_useragent import UserAgentua = UserAgent(verify=False)print(ua.random)
2019-01-10 15:20:25
659
原创 正则匹配时间
以下是该网页在北京时间 2018年12月24日 22:58:19 的快照；publish_time = response.xpath('//*[@id="bd_snap_txt"]/span[2]/text()')[0]print(publish_time)#匹配以上字符串中的日期，匹配数字，数字后面跟任意字符，再匹配到数字publish_time = re.findall('\d.*\d...
2019-01-10 10:22:35
1822
原创 奇葩错误
200{“status”:false,“msg”:“您操作太频繁,请稍后再访问”,“clientIp”:“1.196.135.245”,“state”:2402}
2019-01-08 17:24:23
880
1
原创 【转载】fiddler抓包小技巧之自动保存抓包数据（可根据需求过滤）
说起这个抓包啊，大家都不陌生。辣么，将自己抓获的数据保存下来进行数据分析就是个问题了。一般情况下，这个软件就是操作软件的，设置自动保存的话，只能依靠软件自身来设置。但是呢，这个fiddler不得不让我们又一次见识到了它的强大。废话不多说，咱们直接来看配置哈。首先：然后选择：或者你可以直接按Ctrl+R这个组合键，就可以打开CustomRules.js这个文件了。当然如果有别的提示的话，你就按...
2019-01-05 17:44:45
2096
1
原创 正则匹配表达（2）
import recompanyname = '小da畅快'companyFullName = '成都小da畅快畅联科技有限公司're_reg = re.match('.*' + companyname + '.*', companyFullName) # 模糊匹配我们输入的公司名字是否和结果中的相匹配if re_reg: print('True')...
2019-01-04 17:59:36
119
转载 python利用time进行时间和时间戳之间的相互转换
Note：原文：https://blog.csdn.net/lykio_881210/article/details/79422531标准时间向时间戳转换：1、获取标准时间2、使用strptime()转换成时间数组3、使用mktime()转换成时间戳时间戳转换成标准时间：1、获取时间戳2、使用localtime()转换成时间数组3、使用strftime()格式化我们需要格式-- ...
2019-01-04 11:40:23
975
原创 如何去掉爬虫结果list中空格的字符串
有时取出来的结果如下：:[‘大连’, ’ '，‘成都’, ’ '，‘澳门’, ’ '， ’ ']可以采用如下remove方法去掉:while ' ' in publish_times: publish_times.remove(' ')#去' '，publish_times类型还是list...
2019-01-04 10:11:50
2827
原创 read_from_mongo_to_csv
import csvfrom pymongo import MongoClient# 建立mongo连接client = MongoClient('192.11.11.11', 27017)# client.数据库名db = client.Flight# 用户名密码认证db.authenticate('11', '1@1')#表名字collection = db['test'...
2019-01-04 10:10:47
145
原创 文件写入方法总结
以下总结爬虫中常用的文件写入方法。（1）with open('test.csv','w',encoding='utf-8',newline='') as csvfile: #设置列名 fieldname = ['website','name'] write = csv.DictWriter(csvfile,fieldnames=fieldname) #先将头写入表...
2019-01-03 19:18:39
334
转载 Python中的split()函数的用法
原文：https://www.cnblogs.com/liujiacai/p/7839971.htmlPython split() 通过指定分隔符对字符串进行切片，如果参数 num 有指定值，则分隔 num+1 个子字符串Python中有split()和os.path.split()两个函数，具体作用如下：split()：拆分字符串。通过指定分隔符对字符串进行切片，并返回分割后的字符串列表（...
2019-01-03 11:39:42
15590
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人