Python selenium谷歌驱动内存问题

最新推荐文章于 2024-06-09 11:01:50 发布
最新推荐文章于 2024-06-09 11:01:50 发布
阅读量674 收藏
点赞数
文章标签： python selenium 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_60877671/article/details/127815389
版权

在使用selenium的时候，谷歌的驱动在代码调试时报错无法退出，只退出了GUI但后台还在运行，很占内存，而且任务管理器结束不了

解决方法

import os
os.system('taskkill /IM chromedriver.exe /F')

也可以直接在cmd中使用这行代码

taskkill /IM chromedriver.exe /F

 

吴lwk
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
使用selenium后台多个chromedriver.exe导致内存使用率高
weixin_45750067的博客
06-03 5539
使用selenium后台多个chromedriver.exe导致内存使用率高 使用selenium 实现前端可视化操作，如下代码可以打开chrome浏览器 from selenium import webdriver #chrome浏览器驱动 driver_path = r'./file/chromedriver.exe' #打开google浏览器 driver = webdriver.Chrome(executable_path= driver_path) #浏览器全屏最大化 driver.maximiz
使用selenium和chromedriver组合爬虫时，如果爬取的页面数量巨多，会出现占用内存逐渐增大知道程序崩溃的情况...
weixin_30314631的博客
08-14 4163
使用selenium和chromedriver组合爬虫时，如果爬取的页面数量巨多，会出现占用内存逐渐增大知道程序崩溃的情况。 解决方案：关闭当前的窗口（注意，phantomjs中的窗口其实就是chrome里的标签页，phantomjs是无界面浏览器，不需要像chrome那样可以把几个标签页放在不同的“窗口”显示），打开一个新的窗口请求页面 代码如下 from bs4 import Bea...
python中使用selenium进行爬虫时，导致（内存已缓存）备用内存占用过大导致崩溃问题，3个解决方案
入佛门六根不净，入商场狼性不足
08-05 6392
在使用python进行爬虫的时候，使用selenium进行爬取的时候经常会出现已缓存过大的情况，如果缓存出现过大之后再次执行的话就会计算机拒绝，但是这个时候我们的内存又有很多空间可以使用，一开始我以为是占用文件过多然后点360的那个进行文件整理和清理垃圾，结果效果一样还是无法使用，再买一个内存条的话又不想花钱了，一番检查后发现是这个已缓存占用过大也就是备用内存。......
使用Selenium和chromedriver爬虫，导致后台chrome占用大量内存
qq_40821163的博客
11-13 4308
解决方案： 使用chromedriver时，退出方法需作出更改。 原本是：driver.close() 现改为：driver.quit() 原因：close仅仅关闭了当前页面，并未关闭chrome。使用quit则会真正退出chrome，结束进程。 原理：点击这里 ...
从内存中释放Selenium chromedriver.exe
https://github.com/conanl5566
01-11 732
背景 我设置了一个c#代码来运行Selenium chromedriver.exe.在运行结束时，我有browser.close()来关闭实例。（browser = webdriver.Chrome()）我相信它应该从内存中释放chromedriver.exe（我在Windows 7上）。但是每次运行后，内存中仍有一个chromedriver.exe实例。 问题窥探 从理论上讲，调用browser.Quit将关闭所有浏览器选项卡并终止进程。 但是，在我的情况下，我无法做到这一点 - 因为我并行运行多
python网络爬虫 占用内存和CPU越来越大 越跑越慢
Jinandawang的博客
03-19 4338
一、背景 IDE：spyder 使用 selenium + webdriver 爬取ajax数据 脚本里有for循环（一万次） 每次循环爬取一条数据（约几十 ~ 几百B的大小） 每次循环存进一条数据 二、解决方法（打开资源管理器观察） 在循环中定时关闭webdriver：driver.quit()，浏览器窗口关闭后再重开，webdriver占用的cpu和内存能被释放。 然后发现开了spyder后，会有一个python进程，这个进程占用的内存也会不断飙升，所以就关了spyder，直接用cmd+R
selenium循环打开多个网页导致内存耗尽的解决办法
booklijian的专栏
09-09 3720
近几天使用了Selenium模拟打开浏览器获取网页数据，因为需要打开多个网页所以采用的是for循环的方式，随着程序的运行时间越来越久，发现内存占用越来越多。 原来的代码大体如下：
selenium谷歌驱动
10-11
使用selenium web测试工具，谷歌浏览器的驱动程序，可以用来爬取难爬的网站
pythonselenium环境配置教程.pdf
11-12
浏览器驱动可以从 https://code.google.com/p/selenium/downloads/list 下载。下载完成后，需要将其解压到 C:\Python27\Lib\site-packages目录下。 四、总结 Python Selenium 环境配置需要经过四个步骤：安装 ...
Selenium的chrome版驱动程序chromedriver
02-28
使用Selenium做自动化测试或自动化采集时需要用到浏览器的驱动程序，这个是chrome版，由于官网经常无法访问，所以很多人找驱动很费劲，这里提供了最常用的85-89版本，希望可以帮到大家。 python+ selenium配置教程：...
Python-selenium爬取.xmind
05-21
selenium 定义 Selenium是一个用于自动化... 新建python文件，导入selenium中的webdriver from selenium from webdriver 下载webDriver 网址 https://googlechromelabs.github.io/chrome-for-testing/ 将下
selenium和chromedriver做爬虫时脚本把内存用完最后卡死的解决办法
seattle2009的博客
03-01 5234
进程越来越多，内存越来越满，直至脚本卡死终止的解决办法。一个refresh搞定。
使用ThreadPool()中的pool.map()多线程运行selenium webdriver导致的内存占用巨大，内存溢出乃至电脑卡死解决方法
刘文刚的博客
04-21 2699
解决一：（适用于大量程序并行导致内存溢出）selenium webdriver退出方式： `driver.close()`改为`driver.quit()`。 close()方法：可能是只关闭了当前网页，而未关闭crome，导致大量crome并发，占用内存直至卡死。 quit()方法：关闭当前页面并退出浏览器和退出webdriver驱动。 解决二：程序产生大量缓存（或是其他文件）导致磁盘存储空间...
linux执行python调用chrome内存溢出排查
weixin_38428310的博客
07-21 558
top命令 查看内存及cpu占用情况 发现chrome占用的虚存36.9G，当长到46.9G的时候python程序就会被kill 解决问题第一步： 在python程序中写入: os.system("pkill chrome") os.system("pkill chromedriver") 解决问题第二步： 换一个机器，使用的机器是5G ...
selenium使用chrome驱动，关闭页面后进程还存在
zmy941110的博客
05-08 5524
在工作中，我需要用到selenium进行登录，偶然发现进程中有很多chrome浏览器的进程 类似这样几个月前的快要上百条，包括了chromedriver（浏览器驱动），还有browser（浏览器）虽然CPU和内存的使用可以忽略不计，但是这么挂着也相当辣眼睛。 错误定位比较快，看了一下webdriver.close()的源码，发现还有个.quit()方法： def close(sel...
linux安装chrome和selenium实现爬虫及排查后台开启大量的chromedriver，导致宕机
u014496893的博客
10-06 2033
安装chrome 下载最新的chrome安装 yum install -y https://dl.google.com/linux/direct/google-chrome-stable_current_x86_64.rpm 安装完成后查看安装成功没有 yum list | grep chrome 此处可以看到安装的chrome的版本号，再去安装对应的版本号的驱动。 wget http://npm.taobao.org/mirrors/chromedriver/94.0.4606.61/chromed
python使用selenium执行测试用例后台chrome进程跑满CPU
liweiweili126的博客
09-26 1007
python使用selenium实现的自动化测试工具，执行每个用例结束后，在任务管理器中会出现越来越多的后台chrome进程，在python代码中也有执行webdriver.quit()和service.stop()等释放资源的动作，但是这些后台chrome进程不知道是怎么生成的，就是关闭不掉，结果就是主机的CPU被跑满，然后卡死。在网上没有找到问题出现的原因，我的解决方案就是，使用psutil库，执行完一个用例后将后台所有的webdriver启动的chrome进程全部kill掉。
每日一题——Python实现PAT乙级1042 字符统计（举一反三+思想解读+逐步优化）
最新发布
weixin_44915521的博客
06-09 942
这些编程思想和哲学理念在编写高效、健壮的代码时至关重要。通过理解和应用这些原则，我们不仅能够写出性能更好的代码，还能在不同情况下做出更加明智的设计决策。通过理解和应用这些哲学和编程思想，可以在不同场景中灵活运用，写出更加高效、健壮和灵活的代码。评估需求：根据实际需求选择最合适的数据结构和算法。避免冗余：尽量避免不必要的重复计算和操作。权衡利弊：在空间和时间之间找到最佳平衡点。灵活应变：根据输入数据的特性，灵活使用动态数据结构和提前决策策略。
selenium谷歌驱动路径
07-28
在使用Selenium时，可以通过以下两种方法指定谷歌驱动的路径。第一种方法是直接传入驱动的路径，如下所示：\[1\] ```python driver = webdriver.Chrome(r'...\chromedriver.exe') ``` 第二种方法是使用内置的Service类来处理浏览器驱动的问题，示例如下：\[1\] ```python from selenium.webdriver.chrome.service import Service from selenium import webdriver service = Service(r'...\chromedriver.exe') driver = webdriver.Chrome(service=service) ``` 你可以根据自己的需求选择其中一种方法来指定谷歌驱动的路径。如果你需要下载谷歌驱动，可以从以下两个地址进行下载：\[3\] 下载地址1：http://chromedriver.storage.googleapis.com/index.html 下载地址2：http://npm.taobao.org/mirrors/chromedriver/ 希望对你有帮助！ #### 引用[.reference_title] - *1* *2* [Python之selenium关于Chrome驱动位置，闪退的问题和安装路径](https://blog.csdn.net/weixin_45272371/article/details/130684601)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [【Python】Selenium谷歌驱动配置](https://blog.csdn.net/weixin_43996165/article/details/122435396)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值