python
文章平均质量分 62
weixin_45111459
这个作者很懒,什么都没留下…
展开
-
python多线程爬取小说顺序保存
今天逛微信朋友圈弹出了一个小说广告,点进去,唉,还好看耶,只看了前面两章就要下载app看,于是转战百度看,这百度上面的盗版小说网十分没素质原创 2021-06-01 22:11:18 · 727 阅读 · 0 评论 -
fofa爬虫
今天想实战下上fofa找几个网站,fofa高级会员有点贵,用的一个共享号当天请求过多,明天再试,恩,那不调用api了,自己写一个爬虫,获取web界面的总行了吧多线程爬取 3.8s下面是异步爬取 2.16s,还是快得到点的哈代码都放下边异步的import requestsimport base64import timefrom concurrent.futures import ThreadPoolExecutorimport aiohttpimport .原创 2021-05-25 19:41:29 · 2164 阅读 · 1 评论 -
python3单线程 多线程 多进程 异步协程速度对比
上周刚学习了python的多线程,这周写个速度对比测试一下,也是我的博客园第一篇文章算是一次不太合格的关于python多线程的文章,不过当做对于我上周学习的总结和实践,我还是满意的爬取的地址是http://www.xinfadi.com.cn/marketanalysis/0/list/1.shtml通过url分析页面很简单,第一页是list/1 一直到最后一页http://www.xinfadi.com.cn/marketanalysis/0/list/15525.shtml通过...原创 2021-04-26 12:38:51 · 478 阅读 · 0 评论