如何使用 jq 从大型 json 文件中收集列表的前几个条目？

Question

我正在尝试处理一个包含几千个条目的大型 json 文件以进行测试。 json 包含一长串数据，对于我来说太大了，无法一次性处理。使用 jq，是否有一种简单的方法来获取仅包含 data 列表中前几个条目的 json 的有效片段？例如，是否有一个查询会查看整个 json 文件并返回一个仅包含 data 中前 4 个条目的有效 json？谢谢你！

{
"info":{
"name":"some-name"
},
"data":[
{...},
{...},
{...},
{...}
}

Answer 1

根据您的代码片段，相关的 jq 将是：

.data |= .[:4]

Answer 2

下面是一个使用 --stream 选项的示例：

$ cat input.json
{
  "info": {"name": "some-name"},
  "data": [
    {"a":1},
    {"b":2},
    {"c":3},
    {"d":4},
    {"e":5},
    {"f":6},
    {"g":7}
  ]
}

jq --stream -n '
  reduce (
    inputs | select(has(1) and (.[0] | .[0] == "data" and .[1] < 4))
  ) as $in (
    {}; .[$in[0][-1]] = $in[1]
  )
' input.json

{
  "a": 1,
  "b": 2,
  "c": 3,
  "d": 4
}

注意：在这种情况下使用 limit 会更有效，但出于可扩展性的目的，我尝试更通用。