使用requests抓取天眼查信息

大家在抓取的过程中,肯定遇见过有些内容需要在登陆之后才能抓取的,上一篇中为大家带来了使用selenium抓取天眼查保存到excel.但是selenium效率慢的怀疑人生,今天呢,为大家带来的是使用requests抓取天眼查,很简单,说一下headers部分,携带的cookis是已经登陆过的,重点是在浏览器中将登陆过的headers请求头复制下来,然后找对链接请求传参就行了。好了,话不多说,由于比较简单,就没有写注释,如有看不明白的地方,欢迎留言!上图!
这里写图片描述
下边是抓下来的效果图:
这里写图片描述
就这么多了,是不是很简单呢,所以说,爬虫,思路很重要,如有兴趣的小伙伴,可以尝试将代码改为多线程哦

评论 8
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值