- 博客(1)
- 资源 (12)
- 收藏
- 关注
RSS订阅原创 百度信用爬取的一点总结
详细过程 模型主要分为3个步骤： 1、IP池的定期维护 2、企业信用代码爬取转换为接口唯一ID标识（不需要定时执行，一次即可） 3、根据接口ID爬取具体数据（定期爬取） 1 代理池 文件：proxyPool.py 该代码为Github上的开源代码，定时爬取以下几个网址的免费代理IP，并放入Redis库，之所以用Redis是因为IP池里的IP需要频繁读写和维护，Redis作为NOSQL数据库，响应速度较快，且可移植性较高 2 过程中遇到的问题总结 第一版代码并未加入多进程，爬取速度较慢，但加入多进程之后带
2020-08-18 14:45:41
219
CrystalDiskMark57364.rar
CrystalDiskMark(硬盘检测工具)，一个测试你的硬盘或者存储设备的小巧工具，简单易于操作的界面让你随时可以测试你的存储设备，测试存储设备大小和测试数字都可以选择，还可测试可读和可写的速度。
2019-05-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人