爬虫中常用的7个小技巧,最后一个屡试不爽
今天跟大家分享几个
在爬虫中可以常用到的小技巧
技巧Ⅰ
爬取人家网站的时候频率不要太高,
有事没事睡一会,睡久了没效率
睡短了,被反爬了,那就尴尬了…
随机数更具有欺骗性
所以睡多久,random决定!
import time
import random
for i in range(1,11):
time = random.random()*5
print(f'第{i}次睡了:', time, 's')
'''
第1次睡了: 0.6327309035891232 s
第2次睡了: 0.
原创
2021-06-16 19:41:10 ·
513 阅读 ·
0 评论