当前位置: 代码网 > 服务器>服务器>Linux > jq命令对JSON进行过滤遍历结构转换等操作实例

jq命令对JSON进行过滤遍历结构转换等操作实例

2024年05月18日 Linux 我要评论
引言jq是一个灵活的轻量级命令行json处理器,你可以使用jq命令对json进行过滤、遍历或者结构转换等操作项目主页位于:https://stedolan.github.io/jq/你也可以在线体验:

引言

jq是一个灵活的轻量级命令行json处理器,你可以使用jq命令对json进行过滤、遍历或者结构转换等操作

项目主页位于:

https://stedolan.github.io/jq/ 

你也可以在线体验:

https://jqplay.org/ 

官方文档参考:

https://stedolan.github.io/jq/manual/#basicfilters 

下面来让我们快速入门一下吧

基础

$ jq -h
jq - commandline json processor [version 1.6]

usage: jq [options] <jq filter> [file...]
 jq [options] --args <jq filter> [strings...]
 jq [options] --jsonargs <jq filter> [json_texts...]

常见的用法是jq [options] <jq filter> [file...],例如

$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq '.foo'
{
  "bar": {
    "baz": 123
  }
}

$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq -c '.foo.bar'
{"baz":123}

其中-c 为options'.foo' 即为filter,两者都会在下文介绍

参数[options]

🌲 -r   output raw strings, not json texts

字符串默认带引号,使用-r可以移除字符串的引号

$ echo '{"foo": "bar"}' | jq '.foo'
"bar"

$ echo '{"foo": "bar"}' | jq -r '.foo'
bar

🌲 -c    compact instead of pretty-printed output

jq默认输出格式化之后的json,如果希望能在一行输出使用 -c

$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq  '.foo | .bar'
{
  "baz": 123
}

$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq -c '.foo | .bar'
{"baz":123}

过滤器<jq filter>

🌲 .    输出原始的 json 数据

因为jq默认是格式化的,所以这个filter可以当作格式化

$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq  '.'
{
  "foo": {
    "bar": {
      "baz": 123
    }
  }
}

链接符

先看下连接符,具体filter的含义下面会介绍。两个连接符都是用来组合不同filter来完成特定功能的

🌲 ,    使用多个 filter

需要注意的是使用,每一个filter产生的输出都是一行

$ echo '{"user":"stedolan", "projects": ["jq", "wikiflow"]}' | jq '.user, .projects[]'
"stedolan"
"jq"
"wikiflow"

🌲 |    管道

jq '.a.b.c' 、 jq '.a | .b | .c'  jq '.a' | jq '.b' | jq '.c'是一样的

如果第一个filter产生多个结果,那么下一个filter会对每一个结果都执行。因此.[] | .foo 取出数组中的每一个"foo"

$ echo '[{"name":"json", "good":true}, {"name":"xml", "good":false}]' | jq '.[] | .name'
"json"
"xml"

对象操作

🌲 .foo, .foo.bar    获取对象key的值

'.foo'代表获取foo这个key

'.foo.bar' 代表获取foo对象中的bar,它和上文介绍的 .foo|.bar相同

$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq  '.foo'
{
  "bar": {
    "baz": 123
  }
}

$ echo '{ "foo": { "bar": { "baz": 123 } } }' | jq  '.foo.bar'
{
  "baz": 123
}

⚠️ 如果对象的key包含特殊字符或者以数字开头,使用'.foo'会报错。此时需要使用双引号包裹: ."foo$"."1foo"

$ echo '{ "1foo": { "bar": { "baz": 123 } } }' | jq  '.1foo'
jq: error: syntax error, unexpected ident, expecting $end (unix shell quoting issues?) at &lt;top-level&gt;, line 1:
.1foo
jq: 1 compile error

$ echo '{ "1foo": { "bar": { "baz": 123 } } }' | jq  '."1foo"'
{
  "bar": {
    "baz": 123
  }
}

❗️当取值不是对象时jq默认会报错,如果想忽略报错可以使用  .foo?

$ echo '[1,2,3]' | jq  '.foo'
jq: error (at &lt;stdin&gt;:1): cannot index array with string "foo"

$ echo '[1,2,3]' | jq  '.foo?'

数组操作

🌲 .[2]    数组索引

数组索引也是从0开始,同时支持负数

$ echo '[{"name":"json", "good":true}, {"name":"xml", "good":false}]' | jq '.[0]'
{
  "name": "json",
  "good": true
}

$ echo '[{"name":"json", "good":true}, {"name":"xml", "good":false}]' | jq '.[-2]'
{
  "name": "json",
  "good": true
}

🌲 .[10:15]    数组切片

.[10:15] 包含从从0开始10(含)到15(不含)号元素,如果没有值则默认到头/尾

$ echo '["a","b","c","d","e"]' | jq '.[1:3]'
[
  "b",
  "c"
]

$ echo '["a","b","c","d","e"]' | jq '.[1:]'
[
  "b",
  "c",
  "d",
  "e"
]

数组/对象

🌲 .[]    遍历

对于数组来说,会返回数组中的所有元素

$ echo '[{"name":"json", "good":true}, {"name":"xml", "good":false}]' | jq '.[]'
{
  "name": "json",
  "good": true
}
{
  "name": "xml",
  "good": false
}

对于对象来说,会返回对象中的所有值

$ echo '{"a":1,"b":[1,2]}' | jq '.[]'
1
[
  1,
  2
]

结合上文提到管道,可以取出数组中的每一个field

$ echo '[{"name":"json", "good":true}, {"name":"xml", "good":false}]' | jq '.[] | .name'
"json"
"xml"

与shell结合的常见操作

🌲 同时将json中的多个值赋值到多个变量

首先利用, 来同时解析多个json字段

其次用echo把多行输出转换成单行输出

最后利用read读取到多个变量里

$ read json xml &lt;&lt;&lt; $(echo $(echo '{"foo":"json","bar":"xml"}' | jq -c '.foo, .bar')) &amp;&amp; \
echo "json:$json,xml:$xml"
json:"json",xml:"xml"

🌲 把多个json字段输出到一行

上面使用echo是一种方式,还有一种更通用,尤其是处理数组时更方便的方式

利用@tsv处理,注意输入需要是数组

# 不加处理
$ echo '[{"name":"json","good":true},{"name":"xml","good":false}]' | jq -r  '.[] | .name, .good'        
json
true
xml
false

# 利用@tsv处理,注意输入需要是数组
$ echo '[{"name":"json","good":true},{"name":"xml","good":false}]' | jq -r  '.[] | [.name, .good] | @tsv'
json    true
xml     false

# 还可以输出csv格式的
$ echo '[{"name":"json","good":true},{"name":"xml","good":false}]' | jq -r  '.[] | [.name, .good] | @csv' 
"json",true
"xml",false

🌲 遍历数组

对数组中的每一个元素进行处理

$ echo '["a","b","c","d","e f"]' | jq -c '.[]' | while read i; do echo "val=${i}"; done
val="a"
val="b"
val="c"
val="d"
val="e f"

总结

以上主要介绍了用jq提取jso,更多关于jq命令操作json的资料请关注代码网其它相关文章!

(0)

相关文章:

  • Linux下查看内存使用情况的方法总结

    前言在做linux系统优化的时候,物理内存是其中最重要的一方面。自然的,linux也提供了非常多的方法来监控宝贵的内存资源的使用情况。下面的清单详细的列出了linux系统下通过视图…

    2024年05月18日 服务器
  • 在Linux中重命名文件和目录的几种方法

    前言在这篇基本命令行教程中,你将学习在 linux 终端重命名文件和目录的各种方法。如何在 linux 终端中重命名文件和目录?你可以使用mv命令。是的,与用于将文件和文件夹从一个…

    2024年05月18日 服务器
  • 将shell脚本正确的放在后台运行方式

    1.1 将shell脚本放在后台运行的方式这个有很多种方式哈,可以百度。我常用以下两种####### 我常用的两种& # 放在后台运行,但要注意了,不能是中…

    2024年05月18日 服务器
  • linux踢出远程登录用户命令(总结篇)

    linux踢出远程登录用户命令:查看当前自己的终端:[root@hadoop3 ~]# who am iroot pts/1 2013-01-22 10:45…

    2024年05月18日 服务器
  • Linux修改主机名的命令详解

    Linux修改主机名的命令详解

    引言通常在购买的服务器或者一些新安装的linux系统主机名是一个随机的字符串,但是如果说我们想标识一下每台主机的名称,或者是单纯有强迫症,我们就可以修改一下主机... [阅读全文]
  • Linux Shell任务控制的实现示例

    Linux Shell任务控制的实现示例

    通常情况下运行脚本的方式就是以实时模式在命令行界面上直接运行,除此之外还有很多其他的运行脚本的方式,如后台运行,定时运行等等。除运行方式外,还可以对脚本程序的运... [阅读全文]

版权声明:本文内容由互联网用户贡献,该文观点仅代表作者本人。本站仅提供信息存储服务,不拥有所有权,不承担相关法律责任。 如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 2386932994@qq.com 举报,一经查实将立刻删除。

发表评论

验证码:
Copyright © 2017-2026  代码网 保留所有权利. 粤ICP备2024248653号
站长QQ:2386932994 | 联系邮箱:2386932994@qq.com