- 博客(4)
- 收藏
- 关注
原创 python爬取几千个url页面,使用多线程与队列,并有序输出
这样我就用了2个线程,并添加了queue队列,达到了我要的多线程并有序输出的效果,但是方法fun1和fun2代码一样,只是改了for url in urllist[0:300]:里面的数字,使代码长度增加了,不美观。10个线程,同时运行,速度确实提高了很多,但是我最终要几千个,将df.基金代码[0:10]:改成df.基金代码[0:1000]:,同时开这么多线程电脑都会卡死,而且输出的顺序是乱的。我要获取某基金网站上面的申购费和赎回费,有几千个基金,一个个获取太慢了,于是想到了多线程。
2023-06-01 16:39:02
412
1
原创 列表类型的字符串转换成列表
读取表格一列数据,类型是Series数据,每一个元素看着以为都是list类型,实际上是str,那么如何将看着是list类型的str数据,转成我们需要的list呢?找了很多篇文章,方法有很多种,最简单最方便的方法就是eval()如图,打印结果就是我需要的list类型了。
2023-03-23 10:45:00
269
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人