docker 中使用 selenium + chrome 出现 chrome 崩溃的解决办法

最新推荐文章于 2024-08-08 18:14:17 发布
最新推荐文章于 2024-08-08 18:14:17 发布
阅读量7.9k 收藏 6
点赞数 2
分类专栏： docker 开发其他 文章标签： selenium docker
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/vinson0526/article/details/51861693
版权

在 docker 中使用 selenium + chrome 对网页进行测试，当并发加大后，很可能会出现 chrome 崩溃的情形。出现诸如一下的错误提示：

chrome not reachable
chrome tab crashed
chrome page crashed
...

出现 chrome 崩溃的原因是： docker 默认的共享内存 /dev/shm 只有 64M 当启动多个 chrome 实例后，就不能分配，导致 chrome 崩溃。
解决此问题的方法就是增大 /dev/shm，在启动container的时候，加上参数 --shm-size=1g，这样就没有问题了。

掠雪墨影
关注
专栏目录
chrome浏览器爬虫崩溃，怎么办？python + selenium + chrome + headless模式
Kosmoo的博客
01-08 2万+
chrome浏览器爬虫崩溃，怎么办？python + selenium + chrome + headless模式 1. 背景 在使用selenium + chrome浏览器渲染模式爬取数据时，如果并发任务过多，或者爬虫的运行时间很长，那么很容易出现浏览器崩溃的现象，如下： 这一般是资源消耗过大造成的（据说chrome浏览器有内存泄漏的情况）。那如何解决这个问题呢？ 这种情况下，我
docker环境运用chrome+chromedriver+selenium技术截复杂图片爬坑之旅
m_Sorry的博客
06-12 1344
面对上述需求想到了后端服务控制浏览器打开页面截图的方式解决，然后朝着这个方向努力。、文本等信息，还需要注意格式框架等。如果后端生成比较费事，不太好生成。在开发业务系统时有如下需求：需要后台生成一份。
seleinum调用chrome长时间运行后出现崩溃
xpt211314的博客
05-30 3979
处理解决seleinum调用chrome长时间运行，出现崩溃的问题
docker安装chroma
最新发布
qq_41081716的博客
08-08 250
【代码】docker安装chroma。
二：selenium调用浏览器经常奔溃解决方案
王子的博客
02-08 2035
1.selenium会调用python\下面的驱动，请确认是否已经有对应的驱动（浏览器版本对应的driver驱动） 2.浏览器版本问题：firefox推荐用47版本  chrome推荐使用48版本 3.直接指定浏览器位置，省的它自己去找浏览器位置，代码： opts = webdriver.ChromeOptions() opts.binary_location = "C:\Users\A
docker+chrome+selenium 部署无头模式爬虫出错
so
04-02 722
python3.8 chrome+chromdrive+ubuntu20.04版本都是对应的 错误代码: DevToolsActivePort file doesn't exist 按照之前的方案加上如下代码: options = webdriver.ChromeOptions() options.add_argument("headless") options.add_argument('no-sandbox') 错误依旧会出现 然后直接执行我的chrome: /opt/google/c
Docker selenium自动化 - 执行程序没反应、不执行原因，强制处理之前失败的进程，“... requests waiting for a slot to be free“问题解决
小蓝枣的博客
11-18 1375
docker 运行 selenium 自动化发现根本不向下走了。 访问 Grid 控制台发现提示 3 requests waiting for a slot to be free. 原因是之前执行失败的进程没有正常释放才会出现阻塞的问题。 查看详细信息可以看到超时时间为 1800 秒，即问题进程卡 30 分钟才会自动释放掉。 通过 cocker restart + 实例名 来强制释放失败的进程。 脚本改进方案： 通过 try [关键代码] finally [进程释放]的方式可以避免调试过程中的进程不释放问题
docker-selenium-chrome-ftp:提供Selenium+Chrome+anon FTP的Docker镜像
06-02
docker-selenium-chrome-ftp 对于某些任务，例如文件上传或开发浏览器扩展，您需要在 Selenium 容器中本地提供文件。 最好的方法是使用共享卷。 此映像的存在是为了帮助在某些环境中解决此问题（例如，Wercker，它...
python chrome headless_在docker容器中部署python-selenium+chrome-headless自动化脚本(续)
weixin_42500477的博客
02-19 240
本文将会讲到下列内容：1、制作镜像2、编排容器显然，上次做的不好，如果移植的话，python3还是需要重新安装，这显然不符合我们的初衷。那么，把依赖的python3也做成镜像吧。一、制作python3镜像1、拉去最新python镜像：docker pull python(我这因为已经拉取过了哈)2、编写Dockerfile制作镜像：新建文件Dockerfile，写入下列信息：(注意：文件名只能是这...
selenium+chrome driver封装docker镜像
平凡
06-12 2053
文章目录背景解决方案参考 背景 最近使用chrome driver + python selenium模拟网站登录，以进行持续保活。 但长时间运行后时出现了程序崩溃现象。到网上搜了下，这是个普遍问题。 解决方案 思路 使用Docker封装程序 + 运行在Kubernetes。 这样当程序崩溃后，Kubernetes会把它重新拉起，免去人工运维的麻烦。 实现 逻辑上分为三部分： 主程序 requirements.txt Dockerfile 主程序逻辑大同小异, 例如main.py： from se
docker-selenium：具有Chrome和Firefox以及视频录制支持的Docker中的Selenium。 还要检查：Zalenium
02-01
带有Chrome和Firefox的Docker中的Selenium 具有2个节点的Selenium服务器网格（chrome和firefox） mp4录像 VNC访问（用于调试容器） 谷歌Chrome稳定 google-chrome-beta：不再提供，但 google-chrome-unstable：已...
docker-chromium:在 docker 中运行Chrome
07-14
Docker 中的 Chromium 浏览器 如果您想知道如何在 Docker 中运行 Chromium。 这个 docker image 可能是一个解决方案。 在 Docker 中运行 Chrome 的需要有助于部署测试。 例如，您可能有另一个 docker 镜像正在运行，您的应用程序配置为使用特定的 DNS 名称。 通常的测试方法是更新/etc/hosts上的/etc/hosts以重定向到 localhost。 但是，如果主机上已经使用了标准端口，则不能使用此技术。 这个 Dockerfile 可以用来解决这个问题（目前还没有这种方式）。 不过，它确实可以作为 docker 中的浏览器使用。 安装 docker pull diet/docker-chromium docker run diet/docker-chromium cat /app/bin/chromium.run > ~
docker-chrome:在Docker容器中安装Google Chrome
05-15
码头工人Chrome 在Docker容器中安装Google Chrome 将存储库克隆到本地计算机 git clone 使用以下命令在docker-chrome文件夹中构建容器 docker build --no-cache -t = docker-chrome。 ＃要运行浏览器，DISPLAY应该具有“ xhost local：”或“ xhost +” docker run -it -e DISPLAY = $ DISPLAY -v = / tmp / .X11-unix：/tmp/.X11-unix docker-chrome谷歌浏览器 在Docker容器中享受Google Chrome浏览器
chrome not reachable
慕禾⑦叶
01-14 1万+
使用appium测试webview的时候，报错： chrome not reachable解决方法： 把电脑上代理关掉。。我也是醉了，当时开了shadowsocks。。。更悲剧的事情是，早上来，一看，已经把代理关了，啥也没变，就是命令里去掉了–app-apk、–app-activity，又不行了，这就尴尬了。。。后来又把这两货加上了，就可以了，**求大神告知这是为什么。。。**如图：这样的组合是
Selenium学习（三）Selenium总是崩溃的解决办法
weixin_30667649的博客
10-14 1475
在使用selenium打开浏览器总是崩溃，最近查资料获得可行的解决办法： 1 import sys 2 from selenium import webdriver 3 4 p = __import__('selenium.webdriver.firefox.webdriver',fromlist=('WebDriver'))　　　　##### 5 url = ...
解决Chromedriver报错Original error: chrome not reachable
热门推荐
Tracy的博客
05-09 1万+
切换webview时，提示：Original error: chrome not reachable。报以上错误，主要是由于缺少chromeOptions的配置，加上下面这段（三种方式选需要的即可）。java：ChromeOptions options = new ChromeOptions();options.setExperimentalOption("androidProcess", "co...
Hybrid混合应用—chrome not reachable
ModestLearners的博客
02-11 499
报错如下： Error: Failed to start Chromedriver session: An unknown server-side error occurred while processing the command. Original error: chrome not reachable Error:No Chromedrivers found Original error...
docker+xfce环境 chrome打开网页崩溃问题解决
BestRiven_zh的博客
01-25 557
docker+xfce4 环境下运行chrome 遇到SIGTRAP错误解决办法
Selenium+docker 环境部署（报错异常踩坑记）
hi_bigbai的博客
10-25 1768
JAVA+Selenium+Chrome+Webdriver+Docker的环境配置
Linux上使用selenium截图,docker中使用selenium实现截图
05-16
在Linux上使用selenium截图，需要安装selenium和对应的浏览器驱动。以使用Chrome浏览器为例，可以按照以下步骤操作： 1. 安装Chrome浏览器和ChromeDriver驱动： ``` # 安装Chrome浏览器 sudo apt-get update sudo apt-get install -y google-chrome-stable # 下载对应版本的ChromeDriver驱动并解压 wget https://chromedriver.storage.googleapis.com/88.0.4324.96/chromedriver_linux64.zip unzip chromedriver_linux64.zip ``` 2. 安装selenium： ``` pip install selenium ``` 3. 编写Python脚本，使用selenium打开网页并截图： ```python from selenium import webdriver # 创建Chrome浏览器实例 driver = webdriver.Chrome('./chromedriver') # 打开网页 driver.get('https://www.baidu.com') # 截图并保存 driver.save_screenshot('baidu.png') # 关闭浏览器 driver.quit() ``` 在Docker中使用selenium实现截图，可以使用selenium/standalone-chrome镜像，该镜像已经集成了Chrome浏览器和ChromeDriver驱动，可以直接使用。按照以下步骤操作： 1. 拉取selenium/standalone-chrome镜像： ``` docker pull selenium/standalone-chrome ``` 2. 运行容器： ``` docker run -d -p 4444:4444 selenium/standalone-chrome ``` 3. 在容器中执行Python脚本，使用selenium打开网页并截图： ```python from selenium import webdriver # 创建Chrome浏览器实例 driver = webdriver.Remote('http://localhost:4444/wd/hub', desired_capabilities=webdriver.DesiredCapabilities.CHROME) # 打开网页 driver.get('https://www.baidu.com') # 截图并保存 driver.save_screenshot('baidu.png') # 关闭浏览器 driver.quit() ``` 注意，在容器中执行Python脚本时，需要将Chrome浏览器实例的地址指定为http://localhost:4444/wd/hub。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值