python+selenium爬虫模板（直接使用）

最新推荐文章于 2024-07-30 20:19:30 发布

bilibalasha

最新推荐文章于 2024-07-30 20:19:30 发布

阅读量351

点赞数

分类专栏： python 文章标签： python 爬虫

本文链接：https://blog.csdn.net/bilibalasha/article/details/120674094

版权

一、导入相关库

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

二、设置相关参数

1、初级设置，可以满足大部分的爬

is_headless = input('是否打开浏览器(是1否0)：')
# 设置Chrome浏览器启动时的相关属性
options = webdriver.ChromeOptions()
# 设置user-agent，这个自己问F2
options.add_argument('user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.54 Safari/537.36')
# 判断是否使用无界面浏览器
if is_headless == '0':
    # 必须设置参数
    options.add_argument('--headless')
    # 可选设置参数，根据实际情况使用即可
    options.add_argument(