Linux jq工具

已于 2023-12-15 10:59:42 修改
阅读量83 收藏
点赞数
分类专栏： Linux 文章标签： linux json
于 2023-01-03 16:57:43 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43866248/article/details/128535812
版权

jq命令允许直接在命令行下对JSON进行操作，包括分片、过滤、转换等
JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。基于JavaScript(Standard ECMA-262 3rd Edition - December 1999)的一个子集
JSON 数据的书写格式是： 名称/对象。
JSON的结构基于两点

jq命令的格式
jq [options] filter [files]
options：
–version：输出jq的版本信息并退出
–slurp/-s：读入整个输入流到一个数组。
–raw-input/-R：不作为JSON解析，将每一行的文本作为字符串输出到屏幕。
–null-input/ -n：不读取任何输入，过滤器运行使用null作为输入。一般用作从头构建JSON数据。
–compact-output /-c：使输出紧凑，而不是把每一个JSON对象输出在一行。
–colour-output / -C：打开颜色显示
–monochrome-output / -M：关闭颜色显示
–ascii-output /-a：指定输出格式为ASCII
-raw-output /-r ：如果过滤的结果是一个字符串，那么直接写到标准输出（去掉字符串的引号）
filter：
. : 默认输出
.foo: 输出指定属性，foo代表属性。
.[foo] ：输出指定数组元素。foo代表数组下标。
.[]：输出指定数组中全部元素
， ：指定多个属性作为过滤条件时，用逗号分隔
| ： 将指定的数组元素中的某个属性作为过滤条件
files：
JOSN格式文件。
示例1：

[root@vm_vgh-bj_zywccyr_0-164 test]# cat hostid
{"jsonrpc":"2.0","result":[{"hostid":"11241","proxy_hostid":"0","host":"VM_wuche_ZYWCCYR_10-12-2-70","status":"0","disable_until":"0","error":"","available":"1","errors_from":"0","lastaccess":"0","ipmi_authtype":"-1","ipmi_privilege":"2","ipmi_username":"","ipmi_password":"","ipmi_disable_until":"0","ipmi_available":"0","snmp_disable_until":"0","snmp_available":"0","maintenanceid":"0","maintenance_status":"0","maintenance_type":"0","maintenance_from":"0","ipmi_errors_from":"0","snmp_errors_from":"0","ipmi_error":"","snmp_error":"","jmx_disable_until":"0","jmx_available":"0","jmx_errors_from":"0","jmx_error":"","name":"VM_wuche_ZYWCCYR_10-12-2-70","flags":"0","templateid":"0","description":"","tls_connect":"1","tls_accept":"1","tls_issuer":"","tls_subject":"","tls_psk_identity":"","tls_psk":""},{"adc":"abc"}],"id":0}
[root@vm_vgh-bj_zywccyr_0-164 test]# cat hostid | jq -r .result[0]
{
  "hostid": "11241",
  "proxy_hostid": "0",
  "host": "VM_wuche_ZYWCCYR_10-12-2-70",
  "status": "0",
  "disable_until": "0",
  "error": "",
  "available": "1",
  "errors_from": "0",
  "lastaccess": "0",
  "ipmi_authtype": "-1",
  "ipmi_privilege": "2",
  "ipmi_username": "",
  "ipmi_password": "",
  "ipmi_disable_until": "0",
  "ipmi_available": "0",
  "snmp_disable_until": "0",
  "snmp_available": "0",
  "maintenanceid": "0",
  "maintenance_status": "0",
  "maintenance_type": "0",
  "maintenance_from": "0",
  "ipmi_errors_from": "0",
  "snmp_errors_from": "0",
  "ipmi_error": "",
  "snmp_error": "",
  "jmx_disable_until": "0",
  "jmx_available": "0",
  "jmx_errors_from": "0",
  "jmx_error": "",
  "name": "VM_wuche_ZYWCCYR_10-12-2-70",
  "flags": "0",
  "templateid": "0",
  "description": "",
  "tls_connect": "1",
  "tls_accept": "1",
  "tls_issuer": "",
  "tls_subject": "",
  "tls_psk_identity": "",
  "tls_psk": ""
}
[root@vm_vgh-bj_zywccyr_0-164 test]# cat hostid | jq -r .result[0].hostid
11241

示例2：

[{"hostCompany":"Beijing Autelan Technology","hostModel":"CS-VIC-2000-C","hostsn":"01010730b12014A00477","mac":"00:1F:64:CE:F3:8E","cpuModel":"MIPS 74Kc V4.12","cpuSN":"000000","memoryModel":"abcdefg","memorySN":"000000","boardSN":"01010730b12014A00477","networkCardMac":"00:1F:64:CE:F3:8F","lowFreModel":"AR9344","lowFreSN":"000000","hignFreModel":"AR9582","hignFreSN":"000000","gpsModel":"abcdefg","gpsSN":"000000","MEID_3g":"A000004E123ABD2","Company_3g":"ZTEMT INCORPORATED","modelOf3g":"MC271X","snOf3g":"A000004E123ABD2","iccid":"89860314400200885980","Operators":"CTCC","hardVersion":"1.20","firmwareVersion":"1.0.6.29"}]
$ jq . apinfo.json   
[
  {
    "firmwareVersion": "1.0.6.29",
    "hardVersion": "1.20",
    "Operators": "CTCC",
    "iccid": "DATA DATA",
    "snOf3g": "A000004E123ABD2",
    "modelOf3g": "MC271X",
    "Company_3g": "ZTEMT INCORPORATED",
    "MEID_3g": "A000004E123ABD2",
    "memorySN": "000000",
    "memoryModel": "abcdefg",
    "cpuSN": "000000",
    "cpuModel": "MIPS 74Kc V4.12",
    "mac": "00:1F:64:CE:F3:8E",
    "hostsn": "01010730b12014A00477",
    "hostModel": "CS-VIC-1999-C",
    "stCompany": "Beijing Autelan Technology",
    "boardSN": "01010730b12014A00477",
    "networkCardMac": "00:1F:64:CE:F3:8F",
    "lowFreModel": "AR9344",
    "lowFreSN": "000000",
    "hignFreModel": "AR9582",
    "hignFreSN": "000000",
    "gpsModel": "abcdefg",
    "gpsSN": "000000"
  }
]

jq .[] apinfo.json
{
  "firmwareVersion": "1.0.6.29",
  "hardVersion": "1.20",
  "Operators": "CTCC",
  "iccid": "DATA DATA",
  "snOf3g": "A000004E123ABD2",
  "modelOf3g": "MC271X",
  "Company_3g": "ZTEMT INCORPORATED",
  "MEID_3g": "A000004E123ABD2",
  "memorySN": "000000",
  "memoryModel": "abcdefg",
  "cpuSN": "000000",
  "cpuModel": "MIPS 74Kc V4.12",
  "mac": "00:1F:64:CE:F3:8E",
  "hostsn": "01010730b12014A00477",
  "hostModel": "CS-VIC-1999-C",
  "stCompany": "Beijing Autelan Technology",
  "boardSN": "01010730b12014A00477",
  "networkCardMac": "00:1F:64:CE:F3:8F",
  "lowFreModel": "AR9344",
  "lowFreSN": "000000",
  "hignFreModel": "AR9582",
  "hignFreSN": "000000",
  "gpsModel": "abcdefg",
  "gpsSN": "000000"
}
$ jq -r .[].mac apinfo.json
00:1F:64:CE:F3:8E


$ jq -r '.[] | .mac' apinfo.json
00:1F:64:CE:F3:8E


$ jq -r '.[] |.mac, .gpsSN' apinfo.json
00:1F:64:CE:F3:8E
000000


jq -r '.[].mac, .[].gpsSN' apinfo.json
00:1F:64:CE:F3:8E
000000

示例3：
黑屏调用loki api查询日志，只需要日志信息，不需要其他数据

[root@k8s-master ~]#  curl -G -s   "http://10.96.192.13:3100/loki/api/v1/query_range?limit=5000&start=1684908000000000000&end=1684922400000000000&step=120" --data-urlencode 'query={namespace="eps-prod",pod="prod-bos-group-1-v11-f448dcc98-4852s"}'| jq -r .data.result[0].values
[
  [
    "1684996680999039395",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:38:00 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:38:00.975689945Z\"}"
  ],
  [
    "1684996680247118267",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:38:00 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:38:00.177041759Z\"}"
  ],
  [
    "1684996679996582238",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:59 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:59.973895032Z\"}"
  ],
  [
    "1684996679996575659",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:59 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:59.790327561Z\"}"
  ],
  [
    "1684996679745831827",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:59 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:59.611419648Z\"}"
  ],
  [
    "1684996679495370140",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:59 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:59.401911438Z\"}"
  ],
  [
    "1684996678744244888",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:58 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:58.637100763Z\"}"
  ],
  [
    "1684996678493815519",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:58 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:58.4453956Z\"}"
  ],
  [
    "1684996678243206770",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:58 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:58.202226575Z\"}"
  ],
  [
    "1684996677992997930",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:57 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:57.894751311Z\"}"
  ],
  [
    "1684996677241572206",
    "{\"log\":\"10.244.235.192 - - [25/May/2023:14:37:57 +0800] \\\"GET / HTTP/1.1\\\" 200 612 \\\"-\\\" \\\"curl/7.29.0\\\"\\n\",\"stream\":\"stdout\",\"time\":\"2023-05-25T06:37:57.109562432Z\"}"
  ]
]

接口：GET /loki/api/v1/query_range
数据限制：limit=5000 // 这是最大值
start：开始时间 // 时间戳单位是纳秒
end：结束时间
–data-urlencode：请求体编码
query：查询语句
jq：json数据处理

风向决定发型丶
关注
专栏目录
linux解析json工具——jq
09-16
linux下解析json数据的一个工具包。是一个可执行文件，下载后放到某个目录中就可直接使用。详见：https://www.ibm.com/developerworks/cn/linux/1612_chengg_jq/index.html
Linux杂谈之jq命令
热门推荐
wzj_110的博客
05-29 1万+
一 json格式 二 jq命令 1）首先检查json语法格式 2）
linux 命令之jq
大叶子不小的博客
04-14 3488
jq命令允许直接在命令行下对JSON进行操作，包括分片、过滤、转换等 JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。基于JavaScript(Standard ECMA-262 3rd Edition - December 1999)的一个子集 JSON 数据的书写格式是： 名称/对象。 JSON的结构基于两点 “名称/值”的集合 ,在不同的语言中,它可以被理解为对象(object)，记录(record)，结构(struct)，字典(dictionary)，
shell命令jq用法详解
IT之一小佬的博客
07-01 1万+
shell命令jq用法详解
命令行 JSON 处理工具 jq 的使用介绍
虾米的博客
05-06 3172
jq 简介 JSON 是一种轻量级的数据交换格式。其采用完全独立于语言的文本格式，具有方便人阅读和编写，同时也易于机器的解析和生成。这些特性决定了 JSON 格式越来越广泛的应用于现代的各种系统中。作为系统管理员，在日常的工作中无论是编辑配置文件或者通过 http 请求查询信息，我们都不可避免的要处理 JSON 格式的数据。 jq 是一款命令行下处理 JSON 数据的工具。其可以接受标
jq ajax返回字符串_jq：给力的命令行 JSON 处理工具
weixin_39819576的博客
11-30 141
之前介绍过一个在 Linux 命令行调用 Python 库解析 JSON 数据的案例，有朋友留言说其实 jq 更加强大。当天我检查查了下，觉得 jq 需要另外再编译安装，更加的笨重。不过，看完下面这篇文章之后，我觉得如果有复杂需求的同学，jq 在处理能力上，应该确实是更加强大的。公众号：编程派分享一个 Linux 下的强力 Python 工具文 | 程广@IBM Developer Ne...
jq6500_tools:JQ6500 Linux工具集
05-15
JQ6500 MP3 IC-Linux工具集 JQT6500闪存工具 用法：jq6500flash [选项] -f设备/文件带有JQFS的文件或SCSI设备 -s地址要写入的起始地址（默认值：0x40000） -i文件从JQFS读取ISO到文件 -r dir将JQFS读出到目录 -R...
Linux下使用jq友好的打印JSON技巧分享
10-25
1. jq工具介绍：jq是一个轻量级且灵活的命令行JSON处理器。它允许用户在命令行环境下对JSON数据进行查询和操作，非常适合在脚本中使用。 2. 命令行下处理JSON的痛点：在jq出现之前，用户通常使用cat命令打印JSON...
jq安装包rpm.rar
08-05
这个`jq安装包rpm.rar`是一个包含了`jq`工具的RPM（Red Hat Package Manager）格式的压缩包，主要面向使用Linux发行版如CentOS、Fedora等的用户。RPM是Linux下的一种软件包管理器，它方便了软件的安装、升级和卸载。...
jq-1.5.zip
08-10
jq是一款功能强大的命令行工具，专为处理和操作JSON数据而设计，极大地简化了在Linux环境下对JSON格式数据的操作。 **标签：**“linux”，“json”，“jq1.5” **子文件名称列表：**jq-1.5 **正文：** jq是一个...
linux命令下jq的用法（curl 格式化输出json 字符串）
西京刀客
06-08 6706
文章目录什么是jq命令jq安装jq命令的格式从json文件 对象数组中取出一组特定的属性的值从json文件 对象数组中取出一组特定的属性的值，并排除null值格式化输出json 字符串 什么是jq命令 官网下载： https://stedolan.github.io/jq/download/ jq可以对json数据进行分片、过滤、映射和转换，和sed、awk、grep等命令一样，都可以让你轻松地把玩文本。它能轻松地把你拥有的数据转换成你期望的格式，而且需要写的程序通常也比你期望的更加简短。 jq是用C编写，
linux的json神器之jq
纵横四海的博客
07-25 1万+
mac 安装: brew install jq centos 安装： yum install jq ubuntu: 安装： apt-get install jq jq命令允许直接在命令行下对JSON进行操作 包括分片、过滤、转换等 JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。 基于javascript(Standard ECMA-
ajax raw 请求数据
bupang的博客
08-18 1万+
提交接口数据，接口方提供的是post请求，body - raw ;  不说废话，直接上代码吧 this.ajax = function (url, method, data) { var deferred = $.Deferred(); data = JSON.stringify(data); showWaiting(); var reqOption = {
Linux介绍及常用命令
最新发布
小旺的博客
10-16 1068
1969 年，AT&T 公司的⻉尔实验室P MIT 合作开发的 Unix，í在于创建⼀个⽤于⼤型、并⾏、多⽤户的操作系统Unix 的推⼴：从学校⾛进企业Unix 的版本要两个：AT&T System V ——就是俗称的 系统 5linux是一种操作系统1991 年，芬兰赫尔⾟基⼤学的学⽣ Linus Torvals 为了能在家⾥的 PC 机上使⽤与学校⼀的操作系统，开始编写了类 UNIX.
linux逻辑卷扩容增加空间
放荡不羁爱自由
10-13 304
背景是使用vmware虚拟机安装的centos系统，在上面安装了mysql数据库为了测试千万级表模拟数据然后磁盘不够用了需要扩容。
【Linux】解读信号的本质＆相关函数及指令的介绍
YYDsis的博客
10-14 776
一.信号的本质与相关概念1.体现中断的例子：.系统定义的信号列表1.用kill -l命令可以察看系统定义的信号列表2.（ps＆kill＆raise＆abort）进程指令＆信号相关函数【总结】【1】ps指令【2】kill＆raise函数介绍与演示【3】abort函数介绍与演示三.产生信号的四种方式1.通过终端按键产生信号（Core Dump）2.调用系统函数向进程发信号3.由软件条件产生信号4.硬件异常产生信号
【Linux】ioctl分析
目标：MVP
10-14 1093
一个字符设备驱动通常会实现常规的openreleaseread和write接口，但是如果需要扩展新的功能，通常以ioctl接口的方式实现。fill:#333;user spacevfsdriverioctl()ulocked_ioctl()或compat_ioctl()user spacevfsdriver。
Linux动静态库
2301_76197086的博客
10-13 1130
详解Linux系统中的动静态库生成和使用，以及可执行程序运行时与动态库进行动态链接的原理
如何linux环境中安装jq工具
05-17
在 Linux 环境中，可以使用以下命令安装 jq 工具： Ubuntu/Debian 系统： ``` sudo apt-get update sudo apt-get install jq ``` CentOS/RHEL 系统： ``` sudo yum install epel-release sudo yum install jq ``...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值