selenium无法打开特定的网页

最新推荐文章于 2024-05-12 00:13:00 发布
最新推荐文章于 2024-05-12 00:13:00 发布
阅读量1.8k 收藏 1
点赞数 1
文章标签： 大数据 selenium 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/BlueWind_/article/details/125757291
版权

使用python+selenium爬虫一段时间了，之前一直没有问题。

但是今天应老师要求去爬取某政府网站的部分数据

其结果显示如下图是白板一片，但是我手动去在浏览器输入网站就可以进去，代码改成其他网站也可以进去但唯独这个网站进不去，求大佬分析分析一波原因，是网站的原因吗？

网站：http://credit.customs.gov.cn/

网络上常见的原因我都排除了，不存在网站输入错误以及代码问题和版本问题

大佬们求帮助

 

BlueWind_
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 6
    评论
【已解决】使用selenium启动谷歌Chrome浏览器打开指定网站，页面空白，而使用其它浏览器手动打开该网站则正常
c1007857613的专栏
05-23 8784
【已解决】使用selenium启动谷歌Chrome浏览器打开指定网站，页面空白，而使用其它浏览器手动打开该网站则正常
Edge浏览器驱动程序 python程序使用使用selenium打开浏览器访问网页
04-11
Edge浏览器驱动程序是微软开发的一款用于自动化测试和网页交互的工具...这包括但不限于打开特定网址、点击按钮、填写表单等操作。在实际项目中，合理运用这些工具能大大提高工作效率，减少手动操作的繁琐和出错可能性。
python使用selenium打开网页失败
weixin_61902597的博客
12-19 6672
python使用selenium打开网页失败
selenium无法打开浏览器问题
killer_LIN的博客
08-12 5154
selenium环境配置时出现的问题，希望对大家有帮助
爬虫selenium解决网页空白问题
最新发布
weixin_40467931的博客
05-12 669
from selenium.webdriver import Chrome import time # https://blog.csdn.net/zhoukeguai/article/details/113247342 # driver = Chrome("./chromedriver.exe") # 把当前目录下的chromdriver.exe复制到你的python安装目录. 我用的124版...
selenium.webdriver网页无法正常打开的问题
Li_xuruo的博客
01-10 4716
selenium.webdriver网页无法正常打开的问题
关于python中phantomjs无法访问网页的处理
a980135330的博客
08-29 4068
。，。笔者使用的系统是linux ubuntu，最近在学习爬虫的过程中遇到了一个抓狂的问题，我尝试使用selenium加phantomjs来登陆网页的时候，Pythony一直提示selenium无法找到元素，不管我怎样修改定位的方法，永远出现No such elements的错误，让我几乎抓狂。再确认了测试了好几遍编写的代码后，我将程序出现的错误定位在了其中这几行代码里面 >>> from se
JAVA中使用selenium + Chrome驱动程序抓取页面内容时，碰到的一些问题及思考整理。
chenhailonghp的博客
08-27 2239
背景说明 由于目标页面是vue结构写的，所以无法用urlConnection获取获取连接后，使用Document/Jsoup等解析。页面元素是通过js动态渲染出来的。后来尝试通过webMagic框架，配合selenium\Chrome等进行基础数据的抓取及整理。 处理过程 设计标记型表结构，对抓取的状态、数据等做记录 配置selenium相关环境、工具 分析页面的dom元素，编码解析ht...
为什么selenium自动化测试能打开浏览器但无法打开网页
dzqnb11的博客
03-13 849
代码 from selenium.webdriver import Chrome chrome=Chrome(executable_path='C:\Program Files\Google\Chrome\Application\chrome.exe') chrome.get("https://www.baidu.com")
浏览器打不开python的页面_Selenium驱动程序无法打开浏览器窗口（python）
weixin_39961369的博客
12-17 585
我读了一些selenium指南，决定用python重写一段简单的代码来打开“Google”页面import unittestfrom selenium import webdriverfrom selenium.webdriver.common.keys import Keysclass PythonOrgSearch(unittest.TestCase):def setUp(self):self...
selenium webdriver 开启网页失败，被发现为爬虫，的解决办法
u013595395的博客
09-25 9019
from selenium import webdriver # 为了防止你不确定自己的 chrom 版本，最好两个混合用 options = webdriver.ChromeOptions() # chrom在79版之前用这个 options.add_experimental_option("excludeSwitches", ["enable-automation"]) options.add_experimental_option('useAutomationExtension', False).
python+Selenium用ie打不开浏览器解决办法
致虚极守静笃的博客
09-11 2219
论是selenium2(WebDriver)还是selenium2Library，如果想要调用ie浏览器，均需以下步骤。 采用代理上网时，python+Selenium用ie打不开浏览器 一、解决方案 下载IEDriverServer。进入索引页，首先选择版本号，IEDriverServer的版本号和Selenium的版本号一定要一致，因为我选择的是selenium-2.53，所以IED...
Selenium Webdriver使用已打开的浏览器
11-25
4. **处理权限问题**：由于安全原因，Selenium可能无法直接控制已打开的浏览器，特别是在无头模式下。因此，确保浏览器配置允许WebDriver控制是非常重要的。 5. **切换窗口**：在Selenium中，可以使用`switch_to....
批量打开网页
03-10
3. **自动化任务**：结合批处理脚本或者计划任务，你可以设定在特定时间自动打开所需网页，例如定时获取新闻更新、检查邮件等。 4. **定制化需求**：高级的批量打开工具可能支持自定义参数，比如设置打开新窗口、新...
Python 以无头浏览器模式使用 selenium 实现网页截屏
05-10
这个程序使用 Chrome 浏览器的无头模式来访问百度首页，并等待3秒钟，最后将屏幕截图保存为 `baidu.png` ...请注意，在使用无头浏览器时，可能需要根据网站特定的设置调整其相关参数，比如 user-agent 和 cookie 等。
selenium被反爬出现空白页
qq_35482604的博客
07-12 4462
参考：Selenium+Webdriver被检测识别出来的应对方案
python打开火狐浏览器打不开网页_python使用selenium调用谷歌浏览器打开指定网页...
weixin_39855869的博客
11-21 598
在Windows10家庭版 python36版本下在cmd下 找到python目录下 运行pip install selenium运行如下py脚本内容from selenium import webdriverimport redriver = webdriver.Chrome()url='http://www.263.com/'driver.get(url)出现如下错误：selenium.com...
selenium webdriver启动Chrome浏览器后无法输入网址的解决办法
热门推荐
xiaoxianerqq的专栏
09-25 1万+
转自：https://www.cnblogs.com/fangfangs/p/6265570.html 下载chromedriver时，chromedriver官网打不开的话，可以去淘宝镜像，地址：http://npm.taobao.org/mirrors，使用最新的chromedriver可以避免一些未知错误（我用旧版的就报错了：WebDriverException: unknown erro...
selenium打开网页空白
08-13
当Selenium打开网页时，有几个可能的原因导致页面显示为空白。 第一个可能的原因是Selenium没有等待页面完全加载就开始获取页面内容。在某些情况下，网页的内容需要一些时间才能完全加载和渲染。为了解决这个问题，可以使用Selenium的等待功能，通过等待页面元素的出现或等待页面的特定状态来确保页面加载完成后再获取内容。 第二个可能的原因是Selenium的浏览器驱动程序版本与使用的浏览器版本不兼容。不同的浏览器驱动程序适用于特定版本的浏览器。如果驱动程序版本与浏览器版本不匹配，可能会导致页面显示为空白。解决这个问题的方法是确保Selenium的浏览器驱动程序版本与使用的浏览器版本一致。 第三个可能的原因是网页使用了动态内容，而Selenium获取的是页面加载时的静态内容。有些网页使用JavaScript等技术来动态地更新页面内容，这些动态内容可能在页面加载后才会生成。如果Selenium只获取页面加载时的静态内容，可能会导致页面显示为空白。解决这个问题的方法是使用Selenium的等待功能，等待页面的动态内容生成后再获取页面内容。 综上所述，Selenium打开网页空白的原因可能是没有等待页面完全加载、浏览器驱动程序版本与浏览器版本不兼容或者网页使用了动态内容。解决这个问题的方法是使用Selenium的等待功能、确保浏览器驱动程序版本与浏览器版本一致，以及等待页面的动态内容生成后再获取页面内容。 (Selenium是一个用于自动化测试的工具，常用于模拟用户在网页上的操作。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值