![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
文章平均质量分 72
五个饺子馆
这个作者很懒,什么都没留下…
展开
-
asyncio 协程 异步执行
将代码进行异步后发现,爬取信息的速度加快,但网站拥有反扒等措施,同时大量多次访问会显示‘‘访问速度限制’’,无法正常访问,虽然异步后因为网站反扒限制没能解决爬取时间过长的问题,但是异步的方法还是很值得记录一下。网站内的linux开源软件时,同一款软件有多个版本和对应的多个不同格式的包,按照以往的线性模式,爬取一页29款软件需花费33分钟。事件循环是单线程运行的,所以当sleep之后阻塞单线程,没办法继续运行,所以只能变成同步调用,所以你会看到2个download任务同步返回,耗时4s。结局真的让人很头大。原创 2022-09-09 16:18:32 · 583 阅读 · 0 评论 -
通过python进行PNG转SVG
批量将png转换为svg原创 2022-07-22 15:03:43 · 3577 阅读 · 0 评论