使用jq处理JSON数据(三)

今天,我来分享一下jq工具最后的一部分内容:文件格式转换。

jq工具可以从JSON到CSV的简单转换。

Part1提取数据

我们将把FunTester.json文件的article数组转换为CSV文件。

首先我们通过管道符将article内容过滤出来。

 fv@FunTester  ~/Downloads  cat FunTester.json| jq '.article[]'
{
  "author": "tester1",
  "title": "ApiTest"
}
{
  "author": "tester2",
  "title": "performanceTest"
}

这里我们得到了一组JSON数据,而不是使用.artworks(不带[]),那样我们会得到一个数组,如下:

 fv@FunTester  ~/Downloads  cat FunTester.json| jq '.article'
[
  {
    "author": "tester1",
    "title": "ApiTest"
  },
  {
    "author": "tester2",
    "title": "performanceTest"
  }
]

这里可以理解为带上[]得到的是一组对象,不带得到了一个数组对象。

Part2组装数据

那么接下来,需要将这些JSON对象转换为数组。这里用到之前学到的组合管道符和函数中的语法:增加一个管道符,处理每一个JSON对象数据。

 ✘ fv@FunTester  ~/Downloads  cat FunTester.json| jq '.article[]  | [.author,.title] '
[
  "tester1",
  "ApiTest"
]
[
  "tester2",
  "performanceTest"
]

新的过滤器[.author,.title]处理返回的JSON数据,获取到JSON数据中key是author和title的值,并用逗号,连接。

Part3输出文档

最后一步,我们可以应用@csv运算符,该运算符将JSON数组的格式设置为CSV行:

 fv@FunTester  ~/Downloads  cat FunTester.json| jq '.article[]  | [.author,.title] | @csv'
"\"tester1\",\"ApiTest\""
"\"tester2\",\"performanceTest\""

这里看到里面的分号是转义的,这是由于jq默认情况下将JSON编码应用于其输出。

因此想要获取原始CSV输出,我们需要添加-r参数:

 fv@FunTester  ~/Downloads  cat FunTester.json| jq -r '.article[]  | [.author,.title] | @csv'
"tester1","ApiTest"
"tester2","performanceTest"


上一篇:base64解析爬取糗百


下一篇:MySQL之创建表以及数据库增删改操作