爬虫之绕过浏览器验证

最新推荐文章于 2024-09-18 17:37:16 发布

weixin_51221760

最新推荐文章于 2024-09-18 17:37:16 发布

阅读量492

点赞数

分类专栏： python 文章标签：爬虫 chrome python

本文链接：https://blog.csdn.net/weixin_51221760/article/details/126517058

版权

本文探讨了在Python爬虫过程中遇到的浏览器验证问题，目前解决方案主要为手动处理验证码。测试代码显示，验证码的自动化解决仍是一大挑战。

摘要由CSDN通过智能技术生成

from selenium import webdriver
import json

def create_chrome_driver(*,headless = False):
    options =  webdriver.ChromeOptions()
    options.add_argument("disable-blink-features=AutomationControlled")
    if headless:
        options.add_argument('--headless')
    options.add_experimental_option('excludeSwitches',['enable-automation'])
    options.add_experimental_option('useAutomationExtension',False)
    
    
    # options.add_experimental_option("excludeSwitches",["enable-logging"])
    browser = webdriver.Chrome(options=options)
    browser.execute_cdp_cmd(
        'Page.addScriptToEvaluateOnNewDocument',
        {'source':'object.defineProperty(navigator,"webdriver",{get:()=>undefined})'}
    )
    return browser

def add_cookies(browser,cookie_file):
    with open(cookie_file,'r') as file:
        cookies_list = json.