- 博客(2)
- 资源 (2)
- 收藏
- 关注
原创 用requests处理302页面的重定向(解决链接失效的问题)
最近在爬取智联的简历信息,爬取简历详情页的时候,使用的是公司的分布式框架,获取的详情页的url不会立即爬取,导致出现链接已失效的问题,使用的是模拟ajax获取数据,分析和代码如下:获取上面的request url 和headers,构造模拟请求:cookies = "" #登录后获取 at = ''#从cookies中获取 resume_url = 'https://ihr.zhao...
2018-06-26 12:20:38 28880 2
原创 deepin安装docker
深度官方deepin已经集成了docker,不过不是docker-ce这样的最新版。要想使用最新版可以参考官网debian安装教程安装,不过由于深度在定制过程中进行了大量修改,所以使用官方教程是安装不成功的。具体需要几个地方进行调整。先说说安装步骤:1、如果以前安装过老版本,可以先卸载以前版本: sudo apt-get remove docker docker-engine2、先安装docke...
2018-06-13 16:57:49 398
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人