Python自动化测试-使用Pandas来高效处理测试数据

一、思考

1.Pandas是什么?

  • 功能极其强大的数据分析库
  • 可以高效地操作各种数据集
    • csv格式的文件
    • Excel文件
    • HTML文件
    • XML格式的文件
    • JSON格式的文件
    • 数据库操作

2.经典面试题

通过面试题引出主题,读者可以思考,如果你遇到这题,该如何解答呢?

 二、使用pandas来操作Excel文件

1.安装

a.通过Pypi来安装

pip install pandas

b.通过源码来安装

  1. git clone git://github.com/pydata/pandas.git

  2. cd pandas

  3. python setup.py install

2.按列读取数据

案例中的lemon_cases.xlsx文件内容如下所示:

  1. import pandas as pd

  2. # 读excel文件

  3. # 返回一个DataFrame对象,多维数据结构

  4. df = pd.read_excel('lemon_cases.xlsx', sheet_name='multiply')

  5. print(df)

  6. # 1.读取一列数据

  7. # df["title"] 返回一个Series对象,记录title这列的数据

  8. print(df["title"])

  9. # Series对象能转化为任何序列类型和dict字典类型

  10. print(list(df['title'])) # 转化为列表

  11. # title为DataFrame对象的属性

  12. print(list(df.title)) # 转化为列表

  13. print(tuple(df['title'])) # 转化为元组

  14. print(dict(df['title'])) # 转化为字典,key为数字索引

  15. # 2.读取某一个单元格数据

  16. # 不包括表头,指定列名和行索引

  17. print(df['title'][0]) # title列,不包括表头的第一个单元格

  18. # 3.读取多列数据

  19. print(df[["title", "actual"]])

3.按行读取数据

  1. import pandas as pd

  2. # 读excel文件

  3. df = pd.read_excel('lemon_cases.xlsx', sheet_name='multiply') # 返回一个DataFrame对象,多维数据结构

  4. print(df)

  5. # 1.读取一行数据

  6. # 不包括表头,第一个索引值为0

  7. # 获取第一行数据,可以将其转化为list、tuple、dict

  8. print(list(df.iloc[0])) # 转成列表

  9. print(tuple(df.iloc[0])) # 转成元组

  10. print(dict(df.iloc[0])) # 转成字典

  11. print(dict(df.iloc[-1])) # 也支持负索引

  12. # 2.读取某一个单元格数据

  13. # 不包括表头,指定行索引和列索引(或者列名)

  14. print(df.iloc[0]["l_data"]) # 指定行索引和列名

  15. print(df.iloc[0][2]) # 指定行索引和列索引

  16. # 3.读取多行数据

  17. print(df.iloc[0:3])

4.iloc和loc方法

  1. import pandas as pd

  2. # 读excel文件

  3. df = pd.read_excel('lemon_cases.xlsx', sheet_name='multiply') # 返回一个DataFrame对象,多维数据结构

  4. print(df)

  5. # 1.iloc方法

  6. # iloc使用数字索引来读取行和列

  7. # 也可以使用iloc方法读取某一列

  8. print(df.iloc[:, 0])

  9. print(df.iloc[:, 1])

  10. print(df.iloc[:, -1])

  11. # 读取多列

  12. print(df.iloc[:, 0:3])

  13. # 读取多行多列

  14. print(df.iloc[2:4, 1:4])

  15. print(df.iloc[[1, 3], [2, 4]])

  16. # 2.loc方法

  17. # loc方法,基于标签名或者索引名来选择

  18. print(df.loc[1:2, "title"]) # 多行一列

  19. print(df.loc[1:2, "title":"r_data"]) # 多列多行

  20. # 基于布尔类型来选择

  21. print(df["r_data"] > 5) # 某一列中大于5的数值为True,否则为False

  22. print(df.loc[df["r_data"] > 5]) # 把r_data列中大于5,所在的行选择出来

  23. print(df.loc[df["r_data"] > 5, "r_data":"actual"]) # 把r_data到actual列选择出来

5.读取所有数据

 
  1. import pandas as pd

  2. # 读excel文件

  3. df = pd.read_excel('lemon_cases.xlsx', sheet_name='multiply') # 返回一个DataFrame对象,多维数据结构

  4. print(df)

  5. # 读取的数据为嵌套列表的列表类型,此方法不推荐使用

  6. print(df.values)

  7. # 嵌套字典的列表

  8. datas_list = []

  9. for r_index in df.index:

  10. datas_list.append(df.iloc[r_index].to_dict())

  11. print(datas_list)

6.写入数据

 
  1. import pandas as pd

  2. # 读excel文件

  3. df = pd.read_excel('lemon_cases.xlsx', sheet_name='multiply') # 返回一个DataFrame对象,多维数据结构

  4. print(df)

  5. df['result'][0] = 1000

  6. print(df)

  7. with pd.ExcelWriter('lemon_cases_new.xlsx') as writer:

  8. df.to_excel(writer, sheet_name="New", index=False)

三、使用pandas来操作csv文件

1.读取csv文件

案例中的data.log文件内容如下所示:

 
  1. TestID,TestTime,Success

  2. 0,149,0

  3. 1,69,0

  4. 2,45,0

  5. 3,18,1

  6. 4,18,1

  7. import pandas as pd

  8. # 读取csv文件

  9. # 方法一,使用read_csv读取,列与列之间默认以逗号分隔(推荐方法)

  10. # a.第一行为列名信息

  11. csvframe = pd.read_csv('data.log')

  12. # b.第一行没有列名信息,直接为数据

  13. csvframe = pd.read_csv('data.log', header=None)

  14. # c.第一行没有列名信息,直接为数据,也可以指定列名

  15. csvframe = pd.read_csv('data.log', header=None, names=["Col1", "Col2", "Col3"])

  16. # 方法二,read_table,需要指定列与列之间分隔符为逗号

  17. csvframe = pd.read_table('data.log', sep=",")

2.解答面试题

 
  1. import pandas as pd

  2. # 1.读取csv文件

  3. csvframe = pd.read_csv('data.log')

  4. # 2.选择Success为0的行

  5. new_csvframe = csvframe.loc[csvframe["Success"] == 0]

  6. result_csvframe = new_csvframe["TestTime"]

  7. avg_result = round(sum(result_csvframe)/len(result_csvframe), 2)

  8. print("TestTime最小值为:{}\nTestTime最大值为:{}\nTestTime平均值为:{}".

  9. format(min(result_csvframe), max(result_csvframe), avg_result))

四、总结
  • 在数据分析、数据可视化领域,Pandas的应用极其广泛;在大规模数据、多种类数据处理上效率非常高
  • 在软件测试领域也有应用,但如果仅仅用excel来存放测试数据,使用Pandas就有点“杀鸡焉用宰牛刀”的感觉,那么建议使用特定的模块来处理(比如openpyxl

 

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值