linux服务器返回json,如何用 Linux 命令行工具解析和格式化输出 JSON | Linux 中国-程序员宅基地

技术标签: linux服务器返回json  

原标题:如何用 Linux 命令行工具解析和格式化输出 JSON | Linux 中国

81bc08b3eedeedcf9758025753167d12.png

我们将使用 Linux 上的命令行工具解析并格式化打印 JSON。它对于在 shell 脚本中处理大型 JSON 数据或在 shell 脚本中处理 JSON 数据非常有用。

-- Ostechnix

JSON 是一种轻量级且与语言无关的数据存储格式,易于与大多数编程语言集成,也易于人类理解 —— 当然,如果格式正确的话。JSON 这个词代表 Java Script Object Notation,虽然它以 Java 开头,而且主要用于在服务器和浏览器之间交换数据,但现在正在用于许多领域,包括嵌入式系统。在这里,我们将使用 Linux 上的命令行工具解析并格式化打印 JSON。它对于在 shell 脚本中处理大型 JSON 数据或在 shell 脚本中处理 JSON 数据非常有用。

什么是格式化输出?

JSON 数据的结构更具人性化。但是在大多数情况下,JSON 数据会存储在一行中,甚至没有行结束字符。

显然,这对于手动阅读和编辑不太方便。

这是格式化输出pretty print就很有用。这个该名称不言自明:重新格式化 JSON 文本,使人们读起来更清晰。这被称为 JSON 格式化输出。

用 Linux 命令行工具解析和格式化输出 JSON

可以使用命令行文本处理器解析 JSON 数据,例如 awk、sed 和 gerp。实际上 JSON.awk 是一个来做这个的 awk 脚本。但是,也有一些专用工具可用于同一目的。

1. jq 或 jshon,shell 下的 JSON 解析器,它们都非常有用。

2. Shell 脚本,如 JSON.sh 或 jsonv.sh,用于在 bash、zsh 或 dash shell 中解析JSON。

3. JSON.awk,JSON 解析器 awk 脚本。

4. 像 json.tool 这样的 Python 模块。

5. undercore-cli,基于 Node.js 和 java。

在本教程中,我只关注 jq,这是一个 shell 下的非常强大的 JSON 解析器,具有高级过滤和脚本编程功能。

JSON 格式化输出

JSON 数据可能放在一行上使人难以解读,因此为了使其具有一定的可读性,JSON 格式化输出就可用于此目的的。

示例:来自 jsonip.com 的数据,使用 curl 或 wget 工具获得 JSON 格式的外部 IP 地址,如下所示。

$wget-cq http://jsonip.com/ -O -

实际数据看起来类似这样:

{"ip":"111.222.333.444","about":"/about","Pro!":"http://getjsonip.com"}

现在使用 jq 格式化输出它:

$wget-cq http://jsonip.com/ -O - | jq '.'

通过 jq 过滤了该结果之后,它应该看起来类似这样:

{

"ip":"111.222.333.444",

"about":"/about",

"Pro!":"http://getjsonip.com"

}

同样也可以通过 Python json.tool 模块做到。示例如下:

$catanything.json|python-m json.tool

这种基于 Python 的解决方案对于大多数用户来说应该没问题,但是如果没有预安装或无法安装 Python 则不行,比如在嵌入式系统上。

然而,json.tool Python 模块具有明显的优势,它是跨平台的。因此,你可以在 Windows、Linux 或 Mac OS 上无缝使用它。

如何用 jq 解析 JSON

首先,你需要安装 jq,它已被大多数 GNU/Linux 发行版选中,并使用各自的软件包安装程序命令进行安装。

在 Arch Linux 上:

$sudopacman-S jq

在 Debian、Ubuntu、Linux Mint 上:

$sudoapt-getinstall jq

在 Fedora 上:

$sudodnf install jq

在 openSUSE 上:

$sudozypper install jq

对于其它操作系统或平台参见。

jq 的基本过滤和标识符功能

jq 可以从 STDIN 或文件中读取 JSON 数据。你可以根据情况使用。

单个符号 . 是最基本的过滤器。这些过滤器也称为对象标识符-索引。jq 使用单个 . 过滤器基本上相当将输入的 JSON 文件格式化输出。

◈ 单引号:不必始终使用单引号。但是如果你在一行中组合几个过滤器,那么你必须使用它们。

◈ 双引号:你必须用两个双引号括起任何特殊字符,如 @、 #、 $,例如 jq .foo.”@bar”。

◈ 原始数据打印:不管出于任何原因,如果你只需要最终解析的数据(不包含在双引号内),请使用带有 -r 标志的 jq 命令,如下所示: jq -r .foo.bar。

解析特定数据

要过滤出 JSON 的特定部分,你需要了解格式化输出的 JSON 文件的数据层次结构。

来自维基百科的 JSON 数据示例:

{

"firstName":"John",

"lastName":"Smith",

"age":25,

"address":{

"streetAddress":"21 2nd Street",

"city":"New York",

"state":"NY",

"postalCode":"10021"

},

"phoneNumber":[

{

"type":"home",

"number":"212 555-1234"

},

{

"type":"fax",

"number":"646 555-4567"

}

],

"gender":{

"type":"male"

}

}

我将在本教程中将此 JSON 数据用作示例,将其保存为 sample.json。

假设我想从 sample.json 文件中过滤出地址。所以命令应该是这样的:

$ jq.address sample.json

示例输出:

{

"streetAddress":"21 2nd Street",

"city":"New York",

"state":"NY",

"postalCode":"10021"

}

再次,我想要邮政编码,然后我要添加另一个对象标识符-索引,即另一个过滤器。

$catsample.json|jq.address.postalCode

另请注意,过滤器区分大小写,并且你必须使用完全相同的字符串来获取有意义的输出,否则就是 null。

从 JSON 数组中解析元素

JSON 数组的元素包含在方括号内,这无疑是非常通用的。

要解析数组中的元素,你必须使用 [] 标识符以及其他对象标识符索引。

在此示例 JSON 数据中,电话号码存储在数组中,要从此数组中获取所有内容,你只需使用括号,像这个示例:

$ jq.phoneNumber[]sample.json

假设你只想要数组的第一个元素,然后使用从 0 开始的数组对象编号,对于第一个项目,使用 [0],对于下一个项目,它应该每步增加 1。

$ jq.phoneNumber[0]sample.json

脚本编程示例

假设我只想要家庭电话,而不是整个 JSON 数组数据。这就是用 jq 命令脚本编写的方便之处。

$catsample.json|jq-r'.phoneNumber[] | select(.type == "home") | .number'

首先,我将一个过滤器的结果传递给另一个,然后使用 select 属性选择特定类型的数据,再次将结果传递给另一个过滤器。

解释每种类型的 jq 过滤器和脚本编程超出了本教程的范围和目的。强烈建议你阅读 jq 手册,以便更好地理解下面的内容。

资源:

作者: 选题: 译者: 校对:

本文由 原创编译, 荣誉推出返回搜狐,查看更多

责任编辑:

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_39790760/article/details/116547087

智能推荐

Tomcat NIO(2)-epoll多路复用-程序员宅基地

在上一篇文章里我们介绍了 tomcat io 主要包含那些 items,在这里我们主要介绍tomcat io 的基础-多路复用。tomcat 服务器(tomcat7以上)默认使用 jav..._tomcat是否用了多路复用

【金融直播干货】观看直播无法听到声音怎么办?_进入直播间看不到主播也听不见声音_欢拓云直播的博客-程序员宅基地

在观看一场精彩的金融直播时,你们有没有遇到过无法听到声音的情况?如果直播是有字幕的,那没有声音也还可以看直播,那没有字幕的除了怒火之外,还要找没有声音的原因。下面小编为大家解释一下直播没有声音的原因吧。第一,播放器的原因。即观众或者主播使用的H5播放器被禁止了声音。第二,观众接收声音设备的原因。即观众在观看时声卡等声音设备出问题而导致的。第三,主播直播时声音采集的原因。即主播在开展直播时,声音采集不正常。第四,主播直播声道设置的原因。即主播在直播时设置了左右声道而导致没有声音。针对以上问题,有_进入直播间看不到主播也听不见声音

【寒假每日一题】剪绳子(个人练习)详细题解+推导证明(第六天)-程序员宅基地

前言今天终于出核酸检测的结果,还好大家都没事,不然怕是要封城了!!!今天还是寒假每日一题,不是软广,不是硬广,只是个人练习,题目来自今日头条2019,笔试题。我发现二分法真的是个神奇的算法,厉害的人万物皆可二分,虚心学习一下。题目有N根绳子,第i根绳子长度为Li,现在需要M根等长的绳子,你可以对N根绳子进行任意裁剪(不能拼接),请你帮忙计算出这M根绳子最长的长度是多少。输入格式第一行包含2个正整数N、M,表示原始绳子的数量和需求绳子的数量。第二行包含N个整数,其中第 i 个整数Li表示第

找出回文数_java找出10000-99999中所有的回文数字,例如12321-程序员宅基地

三、找出10000-99999中所有回文数说明:回文数是正反读都一样的数,如 12321、23432、11111 、22222使用之前学过的数字拆分代码如下:public class huiwenshu{public static void main(String []args){ int a=10000;//初始值 int b=0,c=0,e..._java找出10000-99999中所有的回文数字,例如12321

2017年最优秀的七大开源网络监控工具-程序员宅基地

原文地址:http://blog.csdn.net/xiaobing_122613/article/details/73323017对开源软件的需求持续增长,网络管理工具已经适应了这一浪潮。你不再需要为可能不是你所需的软件支付小额的费用,请留意下(大部分)免费的开源工具,用来监控、配置和映射你的联网设备。这里有几个开源网络监控工具来协助IT管理员完成工作。1. 开源网络

RabbitMQ总结(一)--消息队列RabbitMQ应答模式(自动、手动)_rabbitmq 不会自动投递-程序员宅基地

原文链接消息队列RabbitMQ应答模式(自动、手动)为了确保消息不会丢失,RabbitMQ支持消息应答。消费者发送一个消息应答,告诉RabbitMQ这个消息已经接收并且处理完毕了。RabbitMQ就可以删除它了。如果一个消费者挂掉却没有发送应答,RabbitMQ会理解为这个消息没有处理完全,然后交给另一个消费者去重新处理。这样,你就可以确认即使消费者偶尔挂掉也不会丢失任何消息了。没有任何消息超时限制;只有当消费者挂掉时,RabbitMQ才会重新投递。即使处理一条消息会花费很长的时间。消息应答_rabbitmq 不会自动投递

随便推点

Adreno gpu相关工具介绍_adreno profiler下载-程序员宅基地

大家好,今天小白给大家简单分享几款Adreno gpu相关的开发工具,欢迎一起交流学习。摘要:今天的移动计算设备,其性能之强大,是我们在几年无法预料到的。在几年前,我们仅仅能在PC和主机平台上享受到3A级的高品质游戏和图形应用。但今天的智能手机中的GPU的性能已经足以同PC和主机平台的GPU相匹敌。现在曾经的大作都被纷纷移植到了手机和平板平台。这不仅仅让消费者大呼过瘾,更让开发...今..._adreno profiler下载

SIGGRAPH 2022--岩鸽彩虹色羽毛渲染阅读笔记:Rendering Iridescent Rock Dove Neck Feathers_siggraph 渲染-程序员宅基地

论文核心观点:①论文作者提出了一个参数化的羽毛双向散射分布函数(BSDF),它封装了微尺度结构(单支羽毛)的统计。它在渲染时被完全评估和并进行了重要性采样。②论文作者通过改变局部阴影框架,在毫米级尺度(羽毛每根毛)上应用BSDF,提供丰富的细节,而不必明确地建模微观结构。③论文作者在模型中加入了彩虹色,减轻了混合头发和彩虹色着色器的需要。④论文作者使用测量和渲染的BSDF以及照片之间的一对一比较来验证作者的模型。..._siggraph 渲染

详细区分offsetX,clientX,pageX,screenX,layerX和X的区别_offsetx layerx-程序员宅基地

详细区分DOM事件中鼠标指针的坐标问题前面博客中我们讲解到了DOM事件的event对象,里边包含了鼠标事件的指针坐标属性。比如event.offsetX,event.clientX,event.pageX,event.screenX等等。现在我们来解析一下这些坐标属性的区别。HTML代码: <div class="box"></div> <div class="box2"></div>CSS代码: .box{ w_offsetx layerx

电商系统设计之商品上架_电商状态参数-程序员宅基地

近期根据客户的不同需求,定制开发了好几款电商系统,在这整个开发过程中,积攒了一些开发经验和心得,后期我会写一系列文章,来记录我对开发电商系统的理解,这其中会包含一些后台逻辑设计、数据库设计、小程序设计、小程序UI设计等。在功能完善的电商系统中,商品上架是基本、基础的功能,所有商品的购买、订单的结算等,都是围绕商品上架这个核心功能进行的,所以,我们先来聊聊[商品上架]。商品上架,也许有人会说这个很简..._电商状态参数

python怎么输入给变量赋值_Python基本语法(一)---变量与赋值-程序员宅基地

print输出:print("Hello World!")print('The quick brown fox', 'jumps over', 'the lazy dog')print("21+35=",21+35)print()在括号中加上字符串,就可以向屏幕上输出指定的文字;print()函数也可以接受多个字符串,用逗号“,”隔开,就可以连成一串输出,遇到逗号“,”会输出一个空格;print(..._编写程序获取用户姓名,并将输入内容赋值给一个变量

大津算法(Nobuyuki Otsu method)-程序员宅基地

时间:2020-12-02目的:掌握图像分割的基础算法1. 算法原理图像分割,顾名思义将图像中的目标和背景进行区分。通常我们使用固定的阈值进行二值化,但是阈值如何迭代筛选。这个过程可不可以使用程序帮我们迭代呢?迭代条件又是什么呢?大津算法,其根据直方图(假定前景和背景在直方图上呈现出两峰的情况),计算能将两类分开的最佳阈值(前景和背景类间方差最大),然后根据求得的最佳阈值对图像进行全局二值化。大津算法满足我们前述的疑问,只要找到一个直方图基本符合双峰情况,且存在满足类间方差最大的灰阶即可。方._大津算法

推荐文章

热门文章

相关标签