【python接口自动化】- 使用json及jsonpath转换和提取数据

 🔥 交流讨论：欢迎加入我们一起学习！

🔥 资源分享：耗时200+小时精选的「软件测试」资料包

🔥 教程推荐：火遍全网的《软件测试》教程  

📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正！

前言

​ JSON(JavaScript Object Notation)是一种轻量级的数据交换格式。它可以让人们很容易的进行阅读和编写，同时也方便了机器进行解析和生成，适用于进行数据交互的场景，比如网站前台与后台之间的数据交互。简单说就是javascript中的对象和数组，通过这两种结构可以表示各种复杂的结构。

​ 📝对象：对象在js中是花括号{}括起来的内容，数据结构为{key:value,key:value,...}这样的键值对结构，在面向对象的语言中，key为对象的属性，value为对应的属性值，所以很容易理解，取值方法为对象.key来获取属性值，这个属性值的类型可以是数字、字符串、数组、对象这几种。

​ 📝数组：数组在js中是中括号[]括起来的内容，数据结构为["Python", "javascript", "C++",..]，类似python中的列表，取值方式和所有语言中一样，使用索引获取，字段值的类型可以是数字、字符串、数组、对象几种。

json模块

​ 在之前的request库介绍中就提到过，现在99%的接口返回的数据都是json格式，在python中，有专门处理json格式的模块——json模块，在python2.6之后的版本都自带了这一个模块，直接导入import json即可。json模块提供了四个功能：dumps、loads、dump、load，用于字符串和python数据类型之间进行转换。

• json.dumps()：将 Python 对象解码转换成 JSON 字符串
• json.loads()：把JSON 格式字符串解码转换成Python 对象
• json.dump()：将Python内置类型序列化为JSON 对象后写入文件
• json.load()：读取文件中JSON 形式的字符串元素转化成Python 类型

​ 其中类文件对象的理解，其实就是具有read()或者write()方法的对象，比如f = open("test.txt","r") f就是类文件对象。下面对dumps和loads分别举例说明：

python

<span style="background-color:#282c34"><span style="color:#abb2bf"><span style="color:#f92672">import</span> json

data = [{<span style="color:#98c379">'a'</span>: <span style="color:#d19a66">1</span>, <span style="color:#98c379">'b'</span>: <span style="color:#d19a66">2</span>, <span style="color:#98c379">'c'</span>: <span style="color:#d19a66">3</span>}]
data2 = json.dumps(data)  <span style="color:#b18eb1"><em># 将python对象转换成json字符串</em></span>
<span style="color:#e6c07b">print</span>(data2)
<span style="color:#e6c07b">print</span>(<span style="color:#e6c07b">type</span>(data2))
<span style="color:#e6c07b">print</span>(<span style="color:#98c379">"-------还可以使用参数格式化输出json格式--------"</span>)
<span style="color:#e6c07b">print</span>(json.dumps(data, sort_keys=<span style="color:#56b6c2">True</span>, indent=<span style="color:#d19a66">4</span>, separators=(<span style="color:#98c379">','</span>, <span style="color:#98c379">': '</span>)))

jsonData = <span style="color:#98c379">'{"a":1,"b":2,"c":3,"d":4,"e":5}'</span>
text = json.loads(jsonData)
<span style="color:#e6c07b">print</span>(<span style="color:#98c379">"---------json转python---------"</span>)
<span style="color:#e6c07b">print</span>(text)
<span style="color:#e6c07b">print</span>(<span style="color:#e6c07b">type</span>(jsonData))

<span style="color:#b18eb1"><em># 返回结果如下：</em></span>
<span style="color:#b18eb1"><em># C:\software\python\python.exe D:/learn/test.py</em></span>
<span style="color:#b18eb1"><em># [{"a": 1, "b": 2, "c": 3}]</em></span>
<span style="color:#b18eb1"><em># <class 'str'></em></span>
<span style="color:#b18eb1"><em># -------还可以使用参数格式化输出json格式--------</em></span>
<span style="color:#b18eb1"><em># [</em></span>
<span style="color:#b18eb1"><em>#     {</em></span>
<span style="color:#b18eb1"><em>#         "a": 1,</em></span>
<span style="color:#b18eb1"><em>#         "b": 2,</em></span>
<span style="color:#b18eb1"><em>#         "c": 3</em></span>
<span style="color:#b18eb1"><em>#     }</em></span>
<span style="color:#b18eb1"><em># ]</em></span>
<span style="color:#b18eb1"><em># ---------json转python---------</em></span>
<span style="color:#b18eb1"><em># {'a': 1, 'b': 2, 'c': 3, 'd': 4, 'e': 5}</em></span>
<span style="color:#b18eb1"><em># <class 'str'></em></span>
<span style="color:#b18eb1"><em># </em></span>
<span style="color:#b18eb1"><em># Process finished with exit code 0</em></span></span></span>

​ dumps解码的过程，是把python对象转换成json对象的一个过程，常用的两个函数是dumps和dump函数。两个函数的唯一区别就是dump把python对象转换成json对象生成一个fp的文件流，而dumps则是生成了一个字符串。

​ 解码中常用的参数：

• Skipkeys：默认值是False，如果dict的keys内的数据不是python的基本类型，设置为False时，就会报TypeError的错误。此时设置成True，则会跳过这类key
• ensure_ascii：默认值True，如果dict内含有non-ASCII的字符，则会类似\uXXXX的显示数据，设置成False后，就能正常显示
• indent：应该是一个非负的整型，如果是0，或者为空，则一行显示数据，否则会换行且按照indent的数量显示前面的空白，这样打印出来的json数据也叫pretty-printed json
• separators：分隔符，实际上是(item_separator, dict_separator)的一个元组，默认的就是(',','😂；这表示dictionary内keys之间用“,”隔开，而KEY和value之间用“：”隔开
• encoding：默认是UTF-8，设置json数据的编码方式
• sort_keys：将数据根据keys的值进行排序。

​ python 类型向 json 类型的转化对照表如下：

Python	JSON
dict	object（对象）
list, tuple	array（数组）
str, unicode	string
int, long, float	number
True	true
False	false
None	null

​ 反之，json 类型转换到 python 的类型对照表：

JSON	Python
object（对象）	dict
array（数组）	list
string	unicode
number (int)	int, long
number (real)	float
true	True
false	False
null	None

​ 🚩特别注意：转换的时候，python的None会变成null，True和False转换后首字母都会变成小写噢！他们的json格式在python中是无法被识别的，会被当成变量处理。

​ 更多的相关内容，可以查阅python的官方文档：18.2. json — JSON encoder and decoder — Python 2.7.18 documentation

jsonpath库

​ JsonPath是一种信息抽取类库，是从JSON文档中抽取指定信息的工具，提供多种语言实现版本，包括JavaScript、Python、PHP和Java。JsonPath对于JSON来说，就相当于XPATH对于XML。JsonPath结构清晰，可读性高，复杂度低，非常容易匹配，下表中对应了XPath的用法。

Xpath	JSONPath	描述
/	$	根节点
.	@	现行节点
/	. or []	取子节点
..	n/a	取父节点，Jsonpath未支持
//	..	不管位置，选择所有符合条件的节点
*	*	匹配所有元素节点
@	n/a	根据属性访问，JsonPath不支持
[]	[]	迭代器（可以在里边做简单的迭代操作，如数组下标，根据内容选值等）
|	[,]	支持迭代器中做多选
[]	?()	支持过滤操作
n/a	()	支持表达式计算
()	n/a	分组，JsonPath不支持

• pip安装：pip install jsonpath，官网文档：JSONPath - XPath for JSON
• 使用方法：jsonpath.jsonpath（），结果会以列表形式返回，如下请求接口返回数据提取例子
  • 🍊参数1：数据对象
  • 🍎参数2：jsonpath表达式

python

<span style="background-color:#282c34"><span style="color:#abb2bf"><span style="color:#f92672">import</span> requests
<span style="color:#f92672">import</span> jsonpath

login_url = <span style="color:#98c379">"http://localhost:8080/member/login"</span>
login_data = {
    <span style="color:#98c379">"mobile_phone"</span>: <span style="color:#98c379">"15867554893"</span>,
    <span style="color:#98c379">"pwd"</span>: <span style="color:#98c379">"123456qwe"</span>,
}
header = {    <span style="color:#98c379">"Content-Type"</span>: <span style="color:#98c379">"application/json"</span>}
<span style="color:#b18eb1"><em># 发送登录的请求</em></span>
response = requests.post(url=login_url, json=login_data, headers=header)
<span style="color:#b18eb1"><em># 获取返回的json数据</em></span>
json_data = response.json()


member_id = jsonpath.jsonpath(json_data, <span style="color:#98c379">"$..id"</span>)[<span style="color:#d19a66">0</span>]
type_token = jsonpath.jsonpath(json_data, <span style="color:#98c379">"$..token_type"</span>)[<span style="color:#d19a66">0</span>]
token = jsonpath.jsonpath(json_data, <span style="color:#98c379">"$..token"</span>)[<span style="color:#d19a66">0</span>]
<span style="color:#e6c07b">print</span>(json_data)
<span style="color:#e6c07b">print</span>(<span style="color:#98c379">"会员id：{}"</span>.<span style="color:#e6c07b">format</span>(member_id))
<span style="color:#e6c07b">print</span>(<span style="color:#98c379">"token的类型：{}"</span>.<span style="color:#e6c07b">format</span>(type_token))
<span style="color:#e6c07b">print</span>(<span style="color:#98c379">"token：{}"</span>.<span style="color:#e6c07b">format</span>(token))</span></span>

​ 运行返回的数据如下：

shell

<span style="background-color:#282c34"><span style="color:#abb2bf">C:\software\python\python.exe D:/learn/test.py
{'code': 0, 'msg': 'OK', 'data': {'id': 59514, 'money': 34000.0, 'mobile_phone': '15612345678', 'reg_name': 'miki测试', 'reg_time': '2020-11-16 22:18:59.0', 'type': 0, 'token_info': {'token_type': 'Bearer', 'expires_in': '2020-12-10 00:30:01', 'token': 'eyJhbGciOiJIUzUxMiJ9.eyJtZW1iZXJfaWQiOjU5NTE0LCJleHAiOjE2MDc1MzE0MDF9.GAoCY5RZ_FWUIRMNXdURdH5y7zKuETo1qsq9Z9No9AaWvo2QGLR9maWxEY31Ddy6a7QmpT56xKg7N3YwGLTbOQ'}}}
会员id：59514
token的类型：Bearer
token：eyJhbGciOiJIUzUxMiJ9.eyJtZW1iZXJfaWQiOjU5NTE0LCJleHAiOjE2MDc1MzE0MDF9.GAoCY5RZ_FWUIRMNXdURdH5y7zKuETo1qsq9Z9No9AaWvo2QGLR9maWxEY31Ddy6a7QmpT56xKg7N3YwGLTbOQ</span></span>

​ 登录接口返回的json数据格式化后的层级显示如下：

最后我邀请你进入我们的【软件测试学习交流群：785128166】， 大家可以一起探讨交流软件测试，共同学习软件测试技术、面试等软件测试方方面面，还会有免费直播课，收获更多测试技巧，我们一起进阶Python自动化测试/测试开发，走向高薪之路

作为一个软件测试的过来人，我想尽自己最大的努力，帮助每一个伙伴都能顺利找到工作。所以我整理了下面这份资源，现在免费分享给大家，有需要的小伙伴可以关注【公众号：程序员二黑】自提！