selenium 入门及对B站动态抓取取

本文介绍了selenium的安装与基本使用,包括指定浏览器驱动、打开链接、截图和关闭浏览器。同时深入讲解了如何设置cookie实现免登陆操作,以及启用headless模式进行后台运行,并调整浏览器窗口大小。通过编辑Chrome的cookie实现B站动态的抓取。
摘要由CSDN通过智能技术生成

selenium笔记

1.selenium的安装

python直接使用pip安装selenium,然后还需要下载对应浏览器的驱动,Chrome的驱动。一定记得按照你自己的浏览器的版本下载对应的驱动。

2.基本使用示例:

from selenium import webdriver

browser = webdriver.Chrome(executable_path="chromedriver_win32\chromedriver2.exe")
try:
    browser.get("https://www.bilibili.com")
    browser.save_screenshot("123.png")
except Exception as identifier:
    print(identifier)
    pass
finally:
    #browser.close()
    browser.quit()

1.webdriver.Chrome()指定下载的浏览器驱动的位置,可以实例化一个浏览器。

2.browser.get(url)可以在浏览器中打开一个链接。

3.browser.save_screenshot()可以保存浏览器当前的截图(好像推荐.png格式,但是我试用.jpg格式好像也没问题)。

4.browser.close()可以关闭当前页面,browser.quit()可以直接关闭浏览器。

3.高级用法

1.可以设置cookie进行免登陆操作

browser.add_cookie(dict_cookie)

其中dict_cookie为一个cookie的字典,如:

    {
   
        "domain": ".bilibili.com"
  • 2
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值