使用pyppeteer访问页面。解决链接时间过短,链接中断的问题

使用pyppeteer访问页面。解决链接时间过短,链接中断的问题


1、最常的参数headless
最常的参数headless,如果它的值为True或者默认不设置,在启动的时候我们是看不到任何界面的,如果它的值为False,在启动的时候就可以看到界面。一般使用False。
2、args参数
启动界面时,我们会在浏览器上边看到“Chrome正在受到自动测试软件的控制”,关闭这个提示需要增加args参数:args=[’–disable-infobars’]。但是!有些网站还是可以检测到webdriver,例如发生滑块报错等。
3、解决webdriver检测
只需要使用JavaScript赋值为false即可,代码如下:
await page.evaluate(’’’() =>{ Object.defineProperties(navigator,{ webdriver:{ get: () => false } })}’’’)
4、userDataDir参数
设置用户目录,第一次登陆时输入用户名和密码,后面再登陆就不需要再输入密码了,同时会在当前目录自动生成一个userdata文件夹userDataDir=’./userdata’
上代码
在这里插入图片描述
访问之后会出现链接时间过短,链接中断的问题
解决方法:(减号删除该行,加号增加该行)
修改pyppeteer/connection.py中44行:
– self._url, max_size=None, loop=self._loop)
+self._url, max_size=None, loop=self._loop, ping_interval=None, ping_timeout=None)

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值