Airtest-Selenium实操小课：爬取新榜数据(1)，2024年最新2024软件测试常见笔试题

先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前阿里P7

深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新软件测试全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上软件测试知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

如果你需要这些资料，可以添加V获取：vip1024b （备注软件测试）

正文

在写脚本之前，我们需要准备好社区版AirtestIDE，设置好chrome.exe和对应的driver；并且确保我们的chrome浏览器版本不是太高以及selenium是4.0以下即可（这些兼容问题我们都会在后续的版本修复）。

3. 脚本实现

3.1 完整示例代码

接下来就可以着手写脚本啦，关于web自动化脚本，我们可以借助IDE的selenium Window ，方便我们录制控件信息和快速使用常用接口：

完整的参考代码如下：

-- encoding=utf8 --

author = “AirtestProject”

from airtest.core.api import *
from airtest_selenium.proxy import WebChrome
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.common.by import By

“”"
任务描述：打开chrome浏览器，打开百度搜索新榜，进入新榜搜索关键词“自动化”，爬取自动化综合排名前10的公众号名称
https://www.newrank.cn/search/gongzhonghao/%E8%87%AA%E5%8A%A8%E5%8C%96
“”"
def start_selenium():

创建一个实例，代码运行到这里，会打开一个chrome浏览器

driver = WebChrome()
driver.implicitly_wait(20)

driver.get(“https://www.baidu.com/”)

输入搜索关键词并提交搜索

search_box = driver.find_element_by_name(‘wd’)
search_box.send_keys(‘新榜官网’)
search_box.submit()

使用XPath查找文本为 “上海新榜信息技术股份” 的元素并点击

try:
element = driver.find_element_by_xpath(“//div[@id=‘content_left’]/div[@id=‘1’]/div[@class=‘c-container’]/div[1]/h3[@class=‘c-title t t tts-title’]/a”)
except Exception as e:
element = driver.find_element_by_xpath(‘///text()[normalize-space()=“上海新榜信息技术股份”]/parent::’)
element.click()

获取所有窗口句柄

window_handles = driver.window_handles

切换到新打开的窗口

driver.switch_to.window(window_handles[1])

获取新页面的链接

new_page_url = driver.current_url

打印新页面的链接

print(new_page_url)
driver.get(new_page_url)

# 在主内容内部查找 “找达人” 按钮并点击

search_box = driver.find_element_by_xpath(‘//button[@class=“ant-btn ant-btn-primary ant-btn-lg index_searchBtn__c3q_1”]//a’)

print(search_box.text)

获取a标签的URL

url = search_box.get_attribute(‘href’)

打印URL

print(url)
driver.get(url) # 请求搜索链接-跳转

输入搜索关键词并提交搜索

search_box = driver.find_element_by_id(‘rc_select_0’)

模拟发送Backspace键

search_box.send_keys(Keys.BACKSPACE) # 清空内容
search_box.send_keys(Keys.BACKSPACE)
search_box.send_keys(‘自动化’)

模拟发送Enter键

search_box.send_keys(Keys.ENTER)
sleep(5)
list_date = driver.find_elements(By.XPATH, “//div[@class=‘ant-spin-container’]//li”)
for item in list_date:
name_str = item.find_element_by_class_name(“index_name__Fk83i”)
print(name_str.text)

if name == “main”:
start_selenium()

3.2 重要知识点

1）创建实例并打开浏览器

driver = WebChrome()

2）打开网页

driver.get(“https://www.baidu.com/”)

3）元素定位

driver.find_element_by_xpath(‘//button[@class=“ant-btn ant-btn-primary ant-btn-lg index_searchBtn__c3q_1”]//a’)

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip1024b （备注软件测试）

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
[外链图片转存中…(img-C6kp8ZhK-1713281748270)]

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！