JQ获取终端唯一值并按键过滤

Question

我正在发现 jq，它是很棒的东西。在 GitHub 上发布了一些，他们告诉我在这里发布使用问题。

我正在尝试从 json 中获取键/值列表并过滤以保持每个属于列表/数组的键的唯一值。 输入 json 是

{
"key0": {
"key1": "valueA",
"key2": 123456,
"key3": [{
  "key4": "anotherValue41",
  "key5": "anotherValue51",
  "key6": 999
}, {
  "key4": "anotherValue42",
  "key5": "anotherValue52",
  "key6": 666
}],
    "key10": {
        "key11": "lastvalue"
    }
}
}

我的keyList是

["key1","key2","key4","key5","key6","key9","key11"]

预期结果是只保留与键列表匹配的键/值，并按键对值进行分组。

{
"key1": ["valueA"],
"key2": [123456],
"key4": ["anotherValue41", "anotherValue42"],
"key5": ["anotherValue51", "anotherValue52"],
"key6": [999, 666],
"key11": "lastvalue"
}

我尝试使用键，但无法恢复到值...我发现的所有其他样本都有重复的 json 结构。

我希望我足够清楚。

谢谢 西里尔

Answer 1

首先，让我们专注于解决问题，而不用担心 keyList。

这可以使用tostream 和以下辅助函数方便地完成：

# s should be a stream of [key, value] pairs
def aggregate(s):
 reduce s as $x ({}; .[$x[0]] += [$x[1]] );

然后主过滤器可以写成：

aggregate( tostream
  | select(length==2 and (.[0][-1] | type == "string"))
  | [.[0][-1], .[1]] )

碰巧，这会产生原始问题的结果：

{
  "key1": [
    "valueA"
  ],
  "key11": [
    "lastvalue"
  ],
  "key2": [
    123456
  ],
  "key4": [
    "anotherValue41",
    "anotherValue42"
  ],
  "key5": [
    "anotherValue51",
    "anotherValue52"
  ],
  "key6": [
    999,
    666
  ]
}

键列表

为了满足 keyList 的要求，我们假设该列表以$keyList 的形式提供。

然后我们可以通过简单地使用index再添加一个select条件来达到预期的结果：

aggregate( tostream
  | select(length==2 and (.[0][-1] | type == "string"))
  | [.[0][-1], .[1]]
  | select(.[0] as $k | $keyList|index($k) ))