selenium其他方法使用

1. 页面等待
1.1 页面等待分类
  1. 强制等待
    time.sleep()
  2. 隐式等待
    指定时间内定位元素,在一段时间内定位成功,就进行下一步。如果没有定位成功就会报超时加载
from selenium import webdriver

url = 'https://www.baidu.com'

driver = webdriver.Chrome()

driver.implicitly_wait(10)

driver.get(url)

el = driver.find_element_by_xpath('//*[@id = "lg"]/img[1]')

print(el)

在这里插入图片描述

在这里插入图片描述

  1. 显示等待
2. selenium开启无头模式
from selenium import webdriver

url = 'http://www.baidu.com'

#创建配置对象
opt = webdriver.ChromeOptions()

#添加配置参数
opt.add_argument('--headless')
opt.add_argument('--disable-gpu')

#创建浏览器对象的时候添加配置对象

driver = webdriver.Chrome(chrome_options = opt)
driver.get(url)

driver.save_screenshot('baidu.png')

在这里插入图片描述

3. 使用代理ip
from selenium import webdriver

url = 'http://www.baidu.com'

#创建配置对象
opt = webdriver.ChromeOptions()

#添加配置参数
#opt.add_argument('--headless')
#opt.add_argument('--disable-gpu')

opt.add_argument('--proxy-server=http://221.122.91.74:9401')

#创建浏览器对象的时候添加配置对象

driver = webdriver.Chrome(chrome_options = opt)
driver.get(url)

#driver.save_screenshot('baidu.png')

在这里插入图片描述

4. 替换uesr-agent
from selenium import webdriver

url = 'http://www.baidu.com'

#创建配置对象
opt = webdriver.ChromeOptions()

#添加配置参数
#opt.add_argument('--headless')
#opt.add_argument('--disable-gpu')
#opt.add_argument('--proxy-server=http://221.122.91.74:9401')
opt.add_argument('--user-agent=Mozilla/5.0 python3.8')
#创建浏览器对象的时候添加配置对象

driver = webdriver.Chrome(chrome_options = opt)
driver.get(url)

#driver.save_screenshot('baidu.png')

在这里插入图片描述

好的,下面是使用Selenium获取和使用cookie的具体步骤: 1. 导入Selenium和WebDriver: ```python from selenium import webdriver from selenium.webdriver.chrome.options import Options ``` 2. 创建Chrome浏览器对象: ```python chrome_options = Options() chrome_options.add_argument('--headless') # 无界面模式 driver = webdriver.Chrome(options=chrome_options) ``` 3. 访问需要登录的网站: ```python driver.get('https://www.example.com/login') ``` 4. 输入用户名和密码并点击登录按钮: ```python username = driver.find_element_by_name('username') password = driver.find_element_by_name('password') login_button = driver.find_element_by_name('login') username.send_keys('your_username') # 输入用户名 password.send_keys('your_password') # 输入密码 login_button.click() # 点击登录按钮 ``` 5. 获取cookie: ```python cookies = driver.get_cookies() ``` 6. 关闭浏览器: ```python driver.quit() ``` 7. 使用cookie发送HTTP请求: ```python import requests url = 'https://www.example.com/user' headers = {'cookie': '; '.join([f"{cookie['name']}={cookie['value']}" for cookie in cookies])} response = requests.get(url, headers=headers) ``` 在步骤5中,我们通过`driver.get_cookies()`方法获取到了cookie,然后在步骤7中,我们使用`requests`库发送了带有cookie的HTTP请求。注意,在发送请求时需要将cookie拼接成字符串并添加到请求头中。 希望这个例子能够解决你的问题,如果还有其他问题,请随时问我。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值