Selenium 处理 Farme 框架代码

一,有的网页我们使用requests请求,返回的内容没有我们要的信息,然后你会发现返回的代码跟网页源代码是一毛一样(里头根本就没有我们想要的信息),而信息都在框架源代码中(网页内的网页),这时候我们想要获取信息就换方法。
二,使用Selenium里的switch_to.frame()方法:跳转到指定的框架

from selenium import webdriver
from lxml import etree
import csv
import time

driver = webdriver.Chrome()
driver.get("https://music.163.com/#/discover/artist/signed/")
driver.switch_to.frame("g_iframe")

三,数据信息对了,但是有的网页内容通过Ajax动态加载,例如网易云音乐的入驻明星内容,要下拉滚动条加载更多的信息,要如何控制滚动条呢?
这是就要执行JS代码了
Selenium提供了执行 execute_script() 来执行JS

driver.execute_script("arguments[0].scrollIntoView();", target)

四,控制滚动条的多种方法:

#  scrollBy(x,y)中,x为必须参数,表示向右滚动的像素值;y也为必须参数,表示向下滚动的像素值
driver.execute_script('window.scrollBy(0,1000)')

 # scrollTo(x,y) 中,x为必须参数,表示要在窗口文档显示区左上角显示的文档的x坐标;y也为必须参数,表示要在窗口文档显示区左上角显示的文档的y坐标
driver.execute_script('window.scrollTo(0,1000)')
driver.execute_script('document.documentElement.scrollTop=10000')
# 10000表示一下拉到底

target = driver.find_element_by_id("id_keypair")
driver.execute_script("arguments[0].scrollIntoView();", target)
 #拖动到可见的元素去

注意:然而这个网页要循环滚动

五,有时候需要判断元素标签是否显示

from selenium.webdriver.support import expected_conditions as EC
EC.visibility_of_element_located(element元素)

#检查某个元素是否存在于页面上可见。可见性意味着元素不仅显示,而且具有大于0的高度和宽度。定位器-用于查找元素,一旦它被定位并可见,就会返回该元素。

from selenium.webdriver.support import expected_conditions as EC
这个类有很多方法,需要翻看!

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
好的,以下是使用 Selenium 切换 iframe 框架代码封装: ```python from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC class IframeSwitcher: def __init__(self, driver): self.driver = driver def switch_to_iframe(self, iframe_locator): """ 切换到指定的 iframe 框架 :param iframe_locator: iframe 元素定位器 """ iframe_element = WebDriverWait(self.driver, 10).until( EC.presence_of_element_located(iframe_locator) ) self.driver.switch_to.frame(iframe_element) def switch_to_default_content(self): """ 切换回默认的页面 """ self.driver.switch_to.default_content() ``` 使用方法: ```python from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.chrome.service import Service from IframeSwitcher import IframeSwitcher # 启动 Chrome 浏览器 s = Service('./chromedriver') driver = webdriver.Chrome(service=s) # 打开网页 driver.get('https://www.example.com') # 实例化 IframeSwitcher 类 iframe_switcher = IframeSwitcher(driver) # 切换到 iframe 框架 iframe_locator = (By.CSS_SELECTOR, 'iframe[name="myframe"]') iframe_switcher.switch_to_iframe(iframe_locator) # 在 iframe 框架中进行操作 # 切换回默认的页面 iframe_switcher.switch_to_default_content() # 关闭浏览器 driver.quit() ``` 以上代码中,`IframeSwitcher` 类需要传入一个 `driver` 对象,它包含了 webdriver 实例。`switch_to_iframe` 方法接收一个元素定位器参数,用于定位 iframe 元素。`switch_to_default_content` 方法用于切换回默认的页面。 在使用时,需要先实例化 `IframeSwitcher` 类,然后使用 `switch_to_iframe` 方法切换到指定的 iframe,进行操作后再切换回默认的页面。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值