Json高阶使用和一些开源库的用法用途（基本上包含大部分需求）

最新推荐文章于 2024-07-19 14:27:26 发布
最新推荐文章于 2024-07-19 14:27:26 发布
阅读量865 收藏 4
点赞数 2
分类专栏： Json Python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_27695659/article/details/90236613
版权
Python 同时被 2 个专栏收录
283 篇文章 1 订阅
订阅专栏
Json
3 篇文章 0 订阅
订阅专栏

参考资料：
http://json-schema.org/
https://github.com/Julian/jsonschema
https://python-jsonschema.readthedocs.io/en/stable/
https://github.com/dmeranda/demjson
https://jsonschema.net/#/editor
https://github.com/json-path/JsonPath

1. 总体介绍

本文尝试通过json数据校验方法解决如下几个问题：

  • 1.数据没有校验，系统处于裸奔状态，导致后期维护成本高；
  • 2.编写一堆校验代码，混杂在业务代码中，导致代码可读性降低；
  • 3.API交付的时候提供一大段接口描述文档，但用户还是要揣测文档意思。
  • 4.自动校验json格式
  • 5.自动纠正json错误格式
  • 6.对于多层嵌套问题进行深入探讨
  • 7.对于array拆分展开
  • 8.特殊字符处理

2. Json Schema

Json Schema主要用在前后端Json数据交互校验上，一般解决的需求是1，2，3的问题，规定好每一个字段是什么类型比如：

from jsonschema import validate
schema = {
  "definitions": {},
  "$schema": "http://json-schema.org/draft-07/schema#",
  "$id": "http://example.com/example.json",
  "type": "object",
  "title": "The Root Schema",
  "required": [
    "checked",
    "dimensions",
    "id",
    "name",
    "price",
    "tags"
  ],
  "properties": {
    "checked": {
      "$id": "/properties/checked",
      "type": "boolean",
      "title": "The Checked Schema",
      "default": false,
      "examples": [
        false
      ]
    },
    "dimensions": {
      "$id": "/properties/dimensions",
      "type": "object",
      "title": "The Dimensions Schema",
      "required": [
        "width",
        "height"
      ],
      "properties": {
        "width": {
          "$id": "/properties/dimensions/properties/width",
          "type": "integer",
          "title": "The Width Schema",
          "default": 0,
          "examples": [
            5
          ]
        },
        "height": {
          "$id": "/properties/dimensions/properties/height",
          "type": "integer",
          "title": "The Height Schema",
          "default": 0,
          "examples": [
            10
          ]
        }
      }
    },
    "id": {
      "$id": "/properties/id",
      "type": "integer",
      "title": "The Id Schema",
      "default": 0,
      "examples": [
        1
      ]
    },
    "name": {
      "$id": "/properties/name",
      "type": "string",
      "title": "The Name Schema",
      "default": "",
      "examples": [
        "A green door"
      ],
      "pattern": "^(.*)$"
    },
    "price": {
      "$id": "/properties/price",
      "type": "number",
      "title": "The Price Schema",
      "default": 0.0,
      "examples": [
        12.5
      ]
    },
    "tags": {
      "$id": "/properties/tags",
      "type": "array",
      "title": "The Tags Schema",
      "items": {
        "$id": "/properties/tags/items",
        "type": "string",
        "title": "The 0 Schema",
        "default": "",
        "examples": [
          "home",
          "green"
        ],
        "pattern": "^(.*)$"
      }
    }
  }
}

test_json = {
  "checked": false,
  "dimensions": {
    "width": 5,
    "height": 10
  },
  "id": 1,
  "name": "A green door",
  "price": 12.5,
  "tags": [
    "home",
    "green"
  ]
}
test_val = validate(instance=test_json,schema=test_schema)

具体用法可参考json schema的官方网站，比如自己写的json可以通过https://jsonschema.net/#/editor进行转换成schema格式做自动校验

3. JsonPath

JsonPath是一种简单的方法来提取给定JSON文档的部分内容。 JsonPath有许多编程语言，如Javascript，Python和PHP，Java。

JsonPath提供的json解析非常强大，它提供了类似正则表达式的语法，基本上可以满足所有你想要获得的json内容。下面我把官网介绍的每个表达式用代码实现，可以更直观的知道该怎么用它。

JsonPath表达式总是以与XPath表达式结合使用XML文档相同的方式引用JSON结构。

JsonPath中的“根成员对象”始终称为$，无论是对象还是数组。

JsonPath表达式可以使用点表示法

$.store.book [0].title

或括号表示法

$['store']['book'][0]['title']

3.1 操作符

操作	说明
$	查询根元素。这将启动所有路径表达式。
@	当前节点由过滤谓词处理。
*	通配符，必要时可用任何地方的名称或数字。
..	深层扫描。 必要时在任何地方可以使用名称。
.<name>	点，表示子节点
['<name>' (, '<name>')]	括号表示子项
[<number> (, <number>)]	数组索引或索引
[start:end]	数组切片操作
[?(<expression>)]	过滤表达式。 表达式必须求值为一个布尔值。

3.2 函数

函数可以在路径的尾部调用，函数的输出是路径表达式的输出，该函数的输出是由函数本身所决定的。

函数	描述	输出
min()	提供数字数组的最小值	Double
max()	提供数字数组的最大值	Double
avg()	提供数字数组的平均值	Double
stddev()	提供数字数组的标准偏差值	Double
length()	提供数组的长度	Integer

3.3 过滤器运算符

过滤器是用于筛选数组的逻辑表达式。一个典型的过滤器将是[?(@.age > 18)]，其中@表示正在处理的当前项目。 可以使用逻辑运算符&&和||创建更复杂的过滤器。 字符串文字必须用单引号或双引号括起来([?(@.color == ‘blue’)] 或者 [?(@.color == “blue”)]).

操作符	描述
==	left等于right（注意1不等于'1'）
!=	不等于
<	小于
<=	小于等于
>	大于
>=	大于等于
=~	匹配正则表达式[?(@.name =~ /foo.*?/i)]
in	左边存在于右边 [?(@.size in ['S', 'M'])]
nin	左边不存在于右边
size	（数组或字符串）长度
empty	（数组或字符串）为空

3.4 python版本的jsonpath

https://github.com/kennknowles/python-jsonpath-rw
此库主要是为了方便json数据查询

from jsonpath_rw import jsonpath, parse
sJOSN = {
        "test": "123",
        "remote_user": "-",
        "request_time": {
            "receive_time": "14",
            "from_time": "23",
            "to_time": 45
        },
        "day1": {
            "day2": {
                "day3-1": "123",
                "day3-2": "234"
            }
        },
    }

jsonpath_expr = parse('day1.day2.day3-2')
match = jsonpath_expr.find(sJOSN)
print("day:",match,type(match))

4、对json数据格式自动检测自动纠正

当时业务上有这方面需求，找了好多关于json开源的库，奈何没找到想要，不过幸好找到相似的开源库，在此demjson库基础上做了修改，已经放到GitHub上，有兴趣的可自取。

Twish
关注
专栏目录
开源模型应用落地-LangChain高阶-LCEL-表达式语言（六）
没有卑微的工作，只有卑微的心态，与其抱怨，不如埋头实干
06-15 9677
学习LangChain表达式语言的高级用法，包括： 运行自定义函数，接收可运行配置
详谈基于JSON的高级AJAX开发技术
07-31
详谈基于JSON的高级AJAX开发技术 详谈基于JSON的高级AJAX开发技术 详谈基于JSON的高级AJAX开发技术
json 高级使用
shonghuanc的专栏
11-12 128
结构 /** * 获取商位x,y以及相关信息坐标 * * @param booth * @return * @throws JSONException */ private JSONObject getTbBoothJSON(TbBizBooth booth) throws JSONException { JSONObject jsonObje...
C/C++ json库
最新发布
mayue_web的博客
07-19 2806
问题：JSON是否需要包含换行符，如何处理？ JSON转义、\r \n \r\n json中含有换行符’\r’,’\n’的处理 https://www.cnblogs.com/chuanfengzhang/p/12189176.html json的中换行符的处理 https://blog.csdn.net/kof820/article/details/40779165 JSON需要转义的字符 https://blog.csdn.net/u012916291/article/details/70742044
SpringMVC高级应用-json的使用
weixin_42209174的博客
12-11 152
使用步骤: 一)在项目中添加依赖: 二)要求Controller的方法的返回值可以是java任意类型, 但是SpringMVC默认把Controller方法返回值作为作为逻辑视图名, 所以我们要在方法上使用@ResponseBody注解 : 告诉springMVC 这个方法返回值是以数据形式响应给前端, 而且如果你添加了json相关依赖,springMVC会自动把java对象===>json格式字符串,响应给前端 eg1: eg2: ====>Controller的方法参数写实体类时,.
python的json库_Python学习之json库的使用
weixin_39705065的博客
11-24 477
一、json库的简介json库是处理JSON格式的Python标准库，json库主要包括两类函数：操作函数和解析函数。（1）操作函数：主要完成外部JSON格式和程序内部数据类型之间的转换功能。（2）解析函数：主要用于解析键值对内容。（3）json格式包括对象和数组，用大括号{}和方括号[]表示，分别对应键值对的组合关系和对等关系，使用json库时需要注意json格式的“对象”和“数组”概念与Pyt...
json库
打不完哈欠O_O
11-03 344
json库一、json介绍二、python中json标准库的作用三、使用方法 一、json介绍 JavaScript对象表示法 json是轻量级的文本数据交换格式 json独立于语言 json具有自我描述性，更易理解 json比xml更小、更快、更易解析； 二、python中json标准库的作用 使用json字符串生成python对象 由python对象格式化成为json字符串 三、使用方法 方法 功能 josn.dump(obj，fp） 将python数据类型转换并保存到json格
helios,一个用于kotlin的纯功能json库，构建于∧row之上-.zip
10-11
Arrow库是Kotlin的函数式编程工具集，它提供了许多高阶函数和类型类，帮助开发者更好地实现函数式编程风格。Helios利用Arrow库的功能，如Monads、Functors和Applicatives，来构建强大的JSON解析和构建机制。 在使用...
前端开源库-qp-utility
08-30
- **函数工具**：如延迟执行、防抖、节流等高阶函数，有助于优化性能和用户体验。 ### 使用方法 在Node.js环境中，你可以通过npm来安装`qp-utility`： ```bash npm install qp-utility ``` 然后在代码中引入并...
使用Vue 3构建更好的高阶组件
人生代码 ---- 公众号
09-08 936
高阶组件（HOC）是使用模板声明性地向您的应用程序添加某些功能的组件。我相信即使引入了Composition API，它们仍将保持非常重要的关联。HOC始终无法充分发挥其功能的全部功能，...
Android Fragment 使用解析，kotlin高阶函数
m0_64319112的博客
11-21 1109
然后在onCreate()中，通过以下代码将Fragment添加进Activity中。 if (bundle == null) { getSupportFragmentManager().beginTransaction() .add(R.id.container, Fragment1.newInstance(“hello world”),“f1”) //.addToBackStack(“fname”) .commit(); } 这里需要注意几点： 因为我们使用了support库的Fr...
JSONPath:JSONPath（JSON的类似XPath的语法）C＃实现
05-09
JSONPath 该项目是JSONPath的C＃实现。 JSONPath表达式 JSONPath表达式始终以与XPath表达式与XML文档结合使用的相同方式引用JSON结构。 由于JSON结构通常是匿名的，并且不一定具有根成员对象，因此JSONPath假定将抽象名称$分配给外部对象。 JSONPath表达式可以使用点符号： $.store.book[0].title 或括号符号： $['store']['book'][0]['title'] 输入路径。 内部或输出路径将始终转换为更通用的括号符号。 JSONPath允许通配符*表示成员名称和数组索引。 它从借用后代运算符..和从ECMASCRIPT 4借用建议[start:end:step] 。 基础脚本语言（ <expr> ）的<expr>可以用作显式名称或索引的替代形式，如下所示： $.store.book[(@.len
JSON数据的相关应用
qq_41392076的博客
01-08 491
JSON数据格式,JSON对象和JSON字符串相互转换,JSON应用
JS高级十五：JSON
weixin_45725778的博客
03-17 753
1、JSON 什么是JSON？ JSON：JavaScript Object Notation JSON是服务器响应给客户端的数据格式 也可以把JSON数据给服务器 JSON是客户端与服务器之间通信的一种数据格式 JSON的语法要求： 支持的数据类型：数字、字符串、布尔值、null值、数组、对象 不支持的数据类型：函数、undefined 对象的key必须用双引号包起来 JSON中没有注释 可以通过某些网站进行格式化校验 常见格式： 第一种： "hello json" 第二种 { "nam
关于json库的简单介绍
gxx_csdn的博客
12-19 4096
jsonjson：全称JavaScript Object Notation，即js对象标记语言，用于存储和交换数据信息的，独立于语言，json文件通俗易懂，通过“名称：内容”的方式可以定义相应的字段，使用起来很方便。json库与json jar包jar包与库的区别 1. jar：全称Java Archive，即java文档，本质上就是别人写好的一些实现某功能的java class文件，通过打包成j
python json库介绍
0pt1mus
02-04 2308
转自个人博客：super.j的博客 0x00 json介绍 JSON（JavaScript Object Notation）是一种轻量级的数据交换格式，易于人阅读和编写。 JSON常用做网站异步请求的数据交换，网站异步请求，对服务器进行请求后，服务端进行处理后，将处理后的结果通过JSON格式传回给客户，客户端经过解析，表现出来。 在一些程序的编写过程中，通常也通过JSON来进行配置数据的存储，以此...
最强常用开发库总结 - JSON库详解
pdai的博客
01-13 738
最强常用开发库总结 - JSON库详解 JSON应用非常广泛，对于Java常用的JSON库要完全掌握。@pdai JSON简介 JSON是什么 JSON 指的是 JavaScript 对象表示法（JavaScript Object Notation） JSON 是轻量级的文本数据交换格式 JSON 独立于语言：JSON 使用 Javascript语法来描述数据对象，但是 JSON 仍然独立于...
python学习笔记（24）json库的使用
DTCloud
05-10 1820
文章目录简介JSON库解析序列化与反序列化json的操作类函数 简介 json库是处理JSON格式的python库，它是python标准库，直接在程序中导入即可。 import json json库中主要包括两类函数：操作类函数以及解析类函数。操作类函数主要功能是完成外部JSON格式和程序内部数据类型之间的转换。解析类函数的主要功能是解析键值对内容。json格式包括对象和数组。用大括号与方括号表示。分别对应键值对的组合关系以及对等关系。不过值得注意的是，使用json库的时候需要注意，json格式的“对象
json深度详解及org.json库
weixin_34013044的博客
01-01 347
了解json (Javascript Object Notation) 网站:http://json.org/ english JSON (JavaScript Object Notation) is a lightweight data-interchange format. It is easy for humans to read an...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值