python爬虫 腾讯招聘网岗位数据(requests版和scrapy版) --存入json
需求
抓取职位名称,工作职责,岗位要求,发布时间,地点
流程
一级页面处理:目标:提取二级页面的链接
上面有二级页面(具体岗位信息)的链接,看是静态页面还是动态页面(在源码中搜页面中的词),发现是动态页面,获取数据用json
马不停蹄去抓包:Network -->preview -->找到一级页面的数据所在的包,在它们的Headers -->General -->Re...
原创
2019-11-20 21:29:01 ·
929 阅读 ·
0 评论