selenium爬虫:一行代码去掉所有webdriver痕迹

本文介绍了如何在使用selenium爬虫时,通过添加特定flag来消除webdriver的痕迹,防止被服务器识别为机器人。详细讲述了问题的原因及解决方案,并提供了一个实际操作的例子,展示了去除痕迹前后的对比效果。
摘要由CSDN通过智能技术生成

1、前言

码工人之歌

  码工人,码工魂,码工人才是人上人。

  码工人你不要哭,因为……骑电瓶车的时候,擦眼流水儿不安全。

  码工人996写代码少活十年,而不写代码一天都活不下去。

2、问题

  噗哈哈,开个玩笑。首先回顾前两篇selenium系列selenium爬虫使用了代理为什么还是被服务器判定为机器人?以及selenium爬虫使用代理情况下不设置这几个参数,代理就白加了,正确的关闭webrtc以及设置成代理的时区和地理位置,可以很好的帮我们的浏览器伪装成正儿八经的正常浏览器,犹如滤镜可以把王大妈变身成风靡万千宅男的乔碧萝。但是,这还不够,风控系统有各种方式可以将你揪出来。所以应粉丝的要求,今天小码哥又双叒动笔了:

怎么如德芙般丝滑地去掉selenium烦人的webdriver痕迹?

3、原因

  原因很简单,我们使用selenium+chromedriver启动chrome的时候,会在chrome的navigator以及document对象里注入一些属性ÿ

  • 11
    点赞
  • 89
    收藏
    觉得还不错? 一键收藏
  • 17
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 17
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值