Selenium加--headless无界面下无法抓取图片或者其他文件的解决

最新推荐文章于 2024-03-06 13:54:10 发布

小帆芽芽

最新推荐文章于 2024-03-06 13:54:10 发布

阅读量1.3k

点赞数 2

分类专栏： selenium 文章标签： selenium 其他 python 爬虫

本文链接：https://blog.csdn.net/m0_49501453/article/details/120262754

版权

selenium 专栏收录该内容

1 篇文章 1 订阅

订阅专栏

本文探讨了如何在使用Selenium进行无界面（headless）的Chrome浏览器下载图片和其他文件时遇到的问题，并提供了相应的代码调整和参数设置方法。通过添加`Page.setDownloadBehavior`命令，确保在Chrome Headless模式下下载功能的启用。

摘要由CSDN通过智能技术生成

Selenium加–headless无界面下无法抓取图片或者其他文件的解决

贴上代码

url = '你的url'
def enable_download_in_headless_chrome(browser, download_dir):
    #add missing support for chrome "send_command"  to selenium webdriver
    browser.command_executor._commands["send_command"] = ("POST", '/session/$sessionId/chromium/send_command')

    params = {'cmd': 'Page.setDownloadBehavior', 'params': {'behavior': 'allow', 'downloadPath': download_dir}}
    browser.execute("send_command", params)

options = webdriver.ChromeOptions()
options.add_argument('--headless')
options.add_argument("--user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.159 Safari/537.36")
options.add_argument('--window-size=1280,1024')

# options.add_experimental_option("prefs", {
#   "download.default_directory":DIR_NAME,
# })


driver = webdriver.Chrome(executable_path='D:/webdriver/chromedriver',chrome_options=options)

driver.set_window_size(1280, 720) 
DIR_NAME ='E:/test_my/'

enable_download_in_headless_chrome(driver, DIR_NAME)
URL = url
# print(URL)
# print ("loading url")
driver.get(URL)
time.sleep(3)
cookie_list = driver.get_cookies()
cookie_list