方法教程 | 如何避开网站的反爬检测

【解决方法】

      方法一：在导入 launch 之前 把 --enable-automation 禁用 防止监测webdriver

from pyppeteer import launcher
# 在导入 launch 之前 把 --enable-automation 禁用 防止监测webdriver
launcher.AUTOMATION_ARGS.remove("--enable-automation")

这种方法在网上很多博客中都有写，不过我在使用这种方法的时候， 运行报错。

module 'pyppeteer.launcher' has no attribute 'AUTOMATION_ARGS'

 不知道大家运行是不是也是这样。

    方法二：直接在 launcher 脚本中注释掉  --enable-automation 参数

 launcher.py 脚本位置 

(你自己的Python安装路径)\Python37_64\Lib\site-packages\pyppeteer\launcher.py

   

    然后打开脚本，注释掉 --enable-automation ，保存即可。

    

    这种方法是我在方法一的基础上想到的，既然无法在代码中移除该参数，那么就在它的源码中注释掉，哈哈。

    方法三：通过执行 js 脚本，把 webdriver 的值设置为 false，也可以避免被反爬检测。

await page.evaluateOnNewDocument('() =>{ Object.defineProperties(navigator,'        '{ webdriver:{ get: () => false } }) }')

 下面放一段测试代码，亲测确实可行： 

import asyncio
from pyppeteer import launch

url = 'http://www.nhc.gov.cn/