自动测试项目

用于测试设备是否上线,以及上线后自动检测各传感器的状态,并反馈结果。

1,输入设备id

2,自动获取网页数据进行检查得出结果

3,在查看视频直播,和图片上传是否正常

4,记录结果在测下一次

用python爬虫爬取数据

python爬虫要用到requests库

使用requests.get(url)方法访问该URL地址网页,会返回一个响应

再用response.text()方法,将响应的结果转换为文本形式。

得到响应的数据后可以用lxml库来解析数据,获得想要的结果

使用tree.xpath('//div[@class="hd"]/a/span[@class="title"][1]/text()')方法来解析数据,括号中表示匹配class="hd"的div标签下面的a标签下面的class="title"的第一个span标签,并将数据存储为文本返回。

存储数据到Excel要用到openpyxl库

Workbook()方法用来创建工作簿对象,

用sheet=workbook.active来获取活动的工作表

设置表头 sheet['A1']='电影名'

用sheet.cell(row,column,value)来设置对应行列格子的值。

import requests
from lxml import etree

from openpyxl import Workbook

# 创建工作簿对象
workbook = Workbook()

# 获取默认的活动工作表
sheet = workbook.active

# 设置表头
sheet['B1'] = '电影名称'
sheet['C1'] = '评分'


url = f'https://movie.douban.com/top250?start=0&filter='
headers = {'User-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/116.0.0.0 Safari/537.36'}
response = requests.get(url,headers = headers)
html = response.text
# 使用lxml解析HTML
tree = etree.HTML(html)
# 提取电影标题和评分
titles = tree.xpath('//div[@class="hd"]/a/span[@class="title"][1]/text()')
scores = tree.xpath('//span[@class="rating_num"]/text()')

for i in range(len(titles)):
    row = i + 2  # 数据从第二行开始写入,因为第一行是表头
    sheet.cell(row=row, column=1, value=row-1)
    sheet.cell(row=row, column=2, value=titles[i])  # 电影名称
    sheet.cell(row=row, column=3, value=scores[i])  # 评分

# 保存文件
workbook.save('豆瓣电影Top250.xlsx')

这段代码为获取top250的前25个电影的排名,将结果存入Excel表格中

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值