anaconda selenium使用Edge 爬虫

anaconda安装包

在这里插入图片描述
conda install package_name#如果不行,使用下面的
pip install package_name

Edge驱动

  1. 获取edge版本
    在这里插入图片描述
  2. 进入 https://msedgewebdriverstorage.z22.web.core.windows.net/ 下载对应版本的64位驱动,将msedgedriver.exe放在python/Scripts或者Anaconda/Scripts下
  3. 在anaconda\Lib\site-packages\selenium\webdriver\edge\webdriver.py中修改MicrosoftWebDriver.exe为msedgedriver.exe
    在这里插入图片描述
    在这里插入图片描述

参考

https://blog.csdn.net/wycwdmds/article/details/112961007?utm_medium=distribute.pc_relevant.none-task-blog-baidujs_title-0&spm=1001.2101.3001.4242
https://blog.csdn.net/qq_23388925/article/details/114574424

  • 3
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Selenium是一个用于Web应用程序测试的工具,它可以模拟用户操作浏览器来执行各种任务。针对使用Edge浏览器进行爬虫的需求,需要注意以下几点: 首先,安装Selenium和对应的浏览器驱动。你可以使用conda或pip安装Selenium,根据你的需求选择合适的浏览器驱动。如果使用Edge浏览器,可以在https://msedgewebdriverstorage.z22.web.core.windows.net/ 下载对应版本的64位驱动,并将驱动文件(msedgedriver.exe)放置在Python或Anaconda的Scripts目录中。同时,可能还需要修改Selenium中的webdriver.py文件,将MicrosoftWebDriver.exe修改为msedgedriver.exe。 然后,导入所需的库和模块。在Python脚本中,你需要导入Selenium的webdriver模块以及其他相关的模块,例如By、Keys和WebDriverWait等。同时,你可能还需要导入time和os模块,以便在爬虫过程中进行延时等操作。 接下来,你可以根据需要编写具体的爬虫代码。根据你的目标网站和具体需求,使用Selenium的相关方法和功能来模拟用户操作浏览器。你可以使用find_element方法来查找网页元素,使用send_keys方法来输入文本,使用click方法来点击按钮等等。通过结合WebDriverWait和expected_conditions等工具,可以实现更精准的等待和判断操作。 最后,运行你的爬虫代码。根据你选择的开发环境,可以直接运行Python脚本或在Jupyter Notebook中逐行执行代码。在运行过程中,Selenium会自动打开指定的浏览器,并模拟用户操作来执行爬虫任务。 需要注意的是,爬取网站的数据时,请遵守相关法律法规和网站的规定,确保你的行为合法合规。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [anaconda selenium使用Edge 爬虫](https://blog.csdn.net/puspos/article/details/118437785)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [基于Python SeleniumEdge浏览器下爬取商品信息](https://blog.csdn.net/Wanyunshou2018/article/details/121129660)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值