用jq解析不一致的JSON文件

Question

我想解析一个 json 文件，该文件是我在集群上配置的 elasticsearch 角色的输出。不幸的是，它的结构在某些地方有所不同，因为一些角色映射是手动添加的，而一些角色映射是通过 API 添加的。

JSON 示例：

{
  "MAPPING_NAME": "FOO_MAPPING",
  "roles": [
    "FOO_ROLE"
  ],
  "rules": {
    "field": {
      "groups": "CN=FO_SEC_GROUP,OU=foo,OU=example,DC=com"
    }
  }
}
{
  "MAPPING_NAME": "BAR_MAPPING",
  "roles": [
    "BAR_ROLE",
    "builtin_role"
  ],
  "rules": {
    "all": [
      {
        "field": {
          "groups": "CN=BAR_SEC_GROUP,OU=bar,OU=example,DC=com"
        }
      }
    ]
  }
}

我想将上面的 json 转换为如下所示，但第一部分具有“规则 -> 字段 -> 组”，第二部分具有“规则 -> 所有 -> 字段 -> 组”。 groups”

{
  "MAPPING_NAME": "FOO_MAPPING",
  "roles": [ 
    "FOO_ROLE"
  ],
  "GROUPS": "CN=FO_SEC_GROUP,OU=foo,OU=example,DC=com"
}
{
  "MAPPING_NAME": "BAR_MAPPING",
  "roles": [
    "BAR_ROLE",
    "builtin_role"
  ],
  "GROUPS": "CN=BAR_SEC_GROUP,OU=bar,OU=example,DC=com"
}

有什么方法可以用jq解析并最终转换为CSV格式吗？ 谢谢。

Answer 1

您可以使用 has 来检查是否存在名为 all 的键：

jq 'del(.rules) + {
  GROUPS: (.rules | if has("all") then .all[] else . end | .field.groups)
}' input.json

{
  "MAPPING_NAME": "FOO_MAPPING",
  "roles": [
    "FOO_ROLE"
  ],
  "GROUPS": "CN=FO_SEC_GROUP,OU=foo,OU=example,DC=com"
}
{
  "MAPPING_NAME": "BAR_MAPPING",
  "roles": [
    "BAR_ROLE",
    "builtin_role"
  ],
  "GROUPS": "CN=BAR_SEC_GROUP,OU=bar,OU=example,DC=com"
}

演示

另一种方法将利用 错误抑制运算符 < code>? 与 替代运算符 //：

jq 'del(.rules) + {GROUPS: (.rules | .all[]? // . | .field.groups)}'

{
  "MAPPING_NAME": "FOO_MAPPING",
  "roles": [
    "FOO_ROLE"
  ],
  "GROUPS": "CN=FO_SEC_GROUP,OU=foo,OU=example,DC=com"
}
{
  "MAPPING_NAME": "BAR_MAPPING",
  "roles": [
    "BAR_ROLE",
    "builtin_role"
  ],
  "GROUPS": "CN=BAR_SEC_GROUP,OU=bar,OU=example,DC=com"
}

演示

类似的另一种方法是使用 解构替代运算符 ?//...