Python下selenium的get()方法大量时间超时报错TimeOut

遇见的问题:python使用selenium时碰见了加载超时时,后续网页全部报加载超时的错误

解决办法:一旦超时出错后,重启浏览器,再继续跑,就没问题了。

        昨天晚上跑了一个selenium的代码,好多个url,然后获取get到网页后截图保存到本地,使用nohup守护进程运行,同时开了五个程序一起爬,一边梦想着第二天早上的丰收成果。

        第二天早上一看,只有二百多张图片,直接整个人都蒙了,为什么?

        然后查看自己的log文件以及errlog文件,发现了大量的无法访问,是不是昨天晚上断网了所以才无法访问的?

        接下来自己开始前台测试一个,看着结果,然后过了几分钟后,忽然开始大量的无法访问,追根溯源发现有一个url真的是无妨访问,但是剩下的都是可以访问的,代码如下:

        很郁闷的一件事情,不知道如果超时了重启浏览器行不行,然后把代码改成了这个:

        然后再次运行,发现,好像,真的没问题了

评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

ChuckieZhu

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值