Linux下处理JSON的命令行工具：jq---安装

2019独角兽企业重金招聘Python工程师标准>>>

 JSON是前端编程经常用到的格式。Linux下也有处理处理JSON的神器：jq。
       对于JSON格式而言，jq就像sed/awk/grep这些神器一样的方便，而且，jq没有乱七八糟的依赖，只需要一个binary文件jq，就足矣。

       本篇中，我们来看一下jq的安装。

1、执行yum list| grep jq查看是否有jq安装包。

2、若有，直接安装jq，执行命令：yum -y install jq。

安装完毕后，直接在命令行输入：jq，然后回车，看到以下信息说明安装完毕。

3、若安装过程中，报以下错误，可能是引用的包不在现有的包源中，可以试着切换包源。

4、常用的源：

（1）中科大的yum源：
wget http://centos.ustc.edu.cn/CentOS-Base.repo
 （2）163的yum源：
wget http://mirrors.163.com/.help/CentOS-Base-163.repo
下载Yum的安装包,由于体系结构的不同和包的更新，因此目录和文件名的版本号可能需要调整以下。
#wget  http://mirrors.163.com/centos/5/os/x86_64/CentOS/yum-3.2.22-40.el5.centos.noarch.rpm 
#wget  http://mirrors.163.com/centos/5/os/x86_64/CentOS/yum-fastestmirror-1.1.16-21.el5.centos.noarch.rpm 
#wget  http://mirrors.163.com/centos/5/os/x86_64/CentOS/yum-metadata-parser-1.1.2-4.el5.x86_64.rpm 
（3）sohu的yum源：
wget http://mirrors.sohu.com/help/CentOS-Base-sohu.repo

5、我在安装的时候，上述源都不行，可能是我没有找到合适的源，最后用了epel源。epel的安装见上一篇文章。

 

 

JSON是前端编程经常用到的格式，对于PHP或者Python，解析JSON都不是什么大事，尤其是PHP的json_encode和json_decode,干的相当的漂亮。Linux下也有处理处理JSON的神器：jq。
   对于JSON格式而言，jq就像sed/awk/grep这些神器一样的方便，而也，jq没有乱七八糟的依赖，只需要一个binary文件jq，就足矣。下面我们看下jq的使用。
   1 格式化JSON 

1. manu@manu:~/code/php/json$ cat json_raw.txt 
2. {"name":"Google","location":{"street":"1600 Amphitheatre Parkway","city":"Mountain View","state":"California","country":"US"},"employees":[{"name":"Michael","division":"Engineering"},{"name":"Laura","division":"HR"},{"name":"Elise","division":"Marketing"}]}

   上面的JSON是PHP json_encode之后，echo出来的字符串，很明显，可读性太差。前一阵子写文档，需要将前后段JSON写入文档，我当时是用是网上的JSON格式化工具做的。事实上，jq就可以检查JSON的合法性，并把JSON格式化成更友好更可读的格式：

1.     cat json_raw.txt | jq .

    

   看到上图，将一团乱麻的JSON格式化成个更可读的形式。其实背后另外检查了JSON的合法性。如果JSON不合法，jq .会报错。我故意写个错误的JSON：  

1. manu@manu:~/code/php/json$ cat json_err.txt 
2. {"name":"Google","location":{"street":"1600 Amphitheatre Parkway","city":"Mountain View","state":"California","country":"US"},"employees":[{"name":"Michael","division":"Engineering"}{"name":"Laura","division":"HR"},{"name":"Elise","division":"Marketing"}]}

   上面JSON中加粗和斜体部分，遗漏了一个逗号，所以这个JSON是错误的，jq轻松的可以轻松的检查出来：

1.     manu@manu:~/code/php/json$ cat json_err.txt |jq .
2.     parse error: Expected separator between values at line 1, column 183

    2 JSON parse
   如上图json，jq如何解析JSON，根据key获取value？   

1.     {
2.         “key_1”:"value_1",
3.         “key_2”:"value_2",
4.     }

    如何根据key获取value？ 

1.     jq '.key'

    
   解析不存在的元素，会返回null

1.     echo '{"foo": 42, "bar": "less interesting data"}' | jq .nofoo
2.     null

   3 JSON nested parse（嵌套解析）  

1.     cat json_raw.txt | jq '.location.state'
2.     "California"

   4 JSON parse array   

1.     cat json_raw.txt | jq '.employees[1].name'
2.     "Laura"

   5 内建函数
  jq还有一些内建函数如 key，has
  key是用来获取JSON中的key元素的： 

1. cat json_raw.txt | jq 'keys'
2. [
3.   "employees",
4.   "location",
5.   "name"
6. ]

   has是用来是判断是否存在某个key： 

1. cat json_raw.txt | jq 'has("name")'
2. true
3.  
4. cat json_raw.txt | jq 'has("noexisted")'
5. false

   与JSON相关的我就暂时介绍到这里，希望进一步了解jq并使用的可以去http://stedolan.github.io/jq/manual/，希望了解源码实现的，可以去https://github.com/stedolan/jq，意料之中的事情是 作者用来flex和bison来parse json。我们的示例JSON来自参考文献第一篇。用google搜索，kernalpanic中有篇文章介绍了jshon和json.sh提供了另外的思路。不过我挺喜欢及

参考文献：
1 How to parse JSON string via command line on Linux
2  jq - command-line JSON processor

转载于:https://my.oschina.net/u/3157270/blog/1529669