- 博客(1)
- 资源 (1)
- 收藏
- 关注
原创 python -- 拉勾网爬虫模拟登录
入门爬虫一段时间,最近在做一个拉勾网的数据爬虫分析,项目也快接近尾声了,于是抽个时间写一下这个项目中遇到的一些问题。目前拉勾网的反爬虫机制还是可以的,一开始用scrapy shell 分析拉勾网,发现拉勾网要校验useragent,然后访问不到几次就会被重定向到登录页面,即拉勾网会校验cookie。下面是模拟登陆的思路: 拉勾网登录页面: https://passport.lagou.com/lo
2017-09-06 16:21:28 4867 8
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人