- 博客(2)
- 收藏
- 关注
RSS订阅原创 Python爬虫数据存储之csv文件与Excle文件处理
Python爬虫数据存储之csv文件与Excle文件处理 csv文件读取的两种方式： import csv 1.这种方式读取的是一个一个列表通过下标方式获取具体的值 with open('test.csv','r',encoding='utf-8') as f: data = csv.reader(f) for x in data: print(x) 2.这种方式获取的是一个一个字典，可通过键访问列值 with open('test.csv','r',enco
2020-12-15 21:11:47
312
1
原创 Python高性能异步爬虫
Python高性能异步爬虫 方法： **多线程，多进程（不建议）：**可以为相关阻塞操作单独开启线程或进程，阻塞操作可以异步执行。但无法无限制地开启线程或进程。 **线程池、进程池（适当使用）：**可以降低系统开启或者销毁一个线程或者进程的频率，从而很好的降低系统开销。但也不是无限制的。 单线程+异步协程（推荐）： event_loop：事件循环，相当于一个无限循环，可以吧一些函数注册到这个事件循环上，当满足某些条件的时候，函数就会被循环执行。 coroutine：协程对象，我们可以讲协程对
2020-12-15 21:01:23
309
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人