【问题标题】:Append to curl object and add to array in file with jq?附加到 curl 对象并使用 jq 添加到文件中的数组?
【发布时间】:2018-12-05 05:26:35
【问题描述】:

我正在尝试从 URL 动态生成对象的 json 数组并将该数组保存到文件中。是否可以将 curls 输出通过管道传递给 jq 修改 curl json 对象,然后将其附加到文件中的 json 列表并将更新的列表保存回文件中?

目标是遍历一个列表并点击一个 URL,将对象拉下,然后向对象添加一个字段并将输出写入单个 json 文件。

首先我们 curl url 来获取用户对象并向其添加一个新字段。

curl -s https://jsonplaceholder.typicode.com/users/1 | jq '. + {"level": 15}'

显示添加到对象的内容的差异。

diff <(curl -s https://jsonplaceholder.typicode.com/users/1 | jq . ) <(curl -s https://jsonplaceholder.typicode.com/users/1 | jq '. + {"level": 15}')

其次,我们将该用户对象添加到 userList.json 中的列表中。这是我被难住的部分。

第三,我们将更新后的列表写回文件。

JQ updated list command > userList.json

用户对象的卷曲 URL,将值附加到用户对象并将用户对象附加到文件中的数组。我尝试使用--argjson fileInfo "$(&lt;userList.json)",但似乎无法让它工作。我收到无效的路径表达式或无法将对象添加到数组的其他错误。我试过|= . +,但不知道如何正确引用这两个数据集。

echo -e "[\n]" > userList.json
for i in {1..4}; do
  echo -e "\n==> User ${i}"
  testUrl=https://jsonplaceholder.typicode.com/users/${i}
  curl -s ${testUrl} | jq --argjson fileData "$(<userList.json)" '. + {level: 15} += [$fileData]' > userList.json
done
echo -e "==> Complete"
jq . userList.json

创建文件的非 json 方式,但它会缺少每个用户对象之间的逗号分隔符,我可以以编程方式添加逗号,但我宁愿找出 jq 并让它编写正确的 json。将此循环的输出与下面的预期数据进行比较。

for i in {1..4}; do 
  testUrl=https://jsonplaceholder.typicode.com/users/${i}
  curl -s ${testUrl} | jq '. + {level: 15}' >> userList.json
done

userList.json 文件的预期结果,它是添加了字段级别的 4 个用户对象。

[
  {
    "id": 1,
    "name": "Leanne Graham",
    "username": "Bret",
    "email": "Sincere@april.biz",
    "address": {
      "street": "Kulas Light",
      "suite": "Apt. 556",
      "city": "Gwenborough",
      "zipcode": "92998-3874",
      "geo": {
        "lat": "-37.3159",
        "lng": "81.1496"
      }
    },
    "phone": "1-770-736-8031 x56442",
    "website": "hildegard.org",
    "company": {
      "name": "Romaguera-Crona",
      "catchPhrase": "Multi-layered client-server neural-net",
      "bs": "harness real-time e-markets"
    },
    "level": 15
  },
  {
    "id": 2,
    "name": "Ervin Howell",
    "username": "Antonette",
    "email": "Shanna@melissa.tv",
    "address": {
      "street": "Victor Plains",
      "suite": "Suite 879",
      "city": "Wisokyburgh",
      "zipcode": "90566-7771",
      "geo": {
        "lat": "-43.9509",
        "lng": "-34.4618"
      }
    },
    "phone": "010-692-6593 x09125",
    "website": "anastasia.net",
    "company": {
      "name": "Deckow-Crist",
      "catchPhrase": "Proactive didactic contingency",
      "bs": "synergize scalable supply-chains"
    },
    "level": 15
  },
  {
    "id": 3,
    "name": "Clementine Bauch",
    "username": "Samantha",
    "email": "Nathan@yesenia.net",
    "address": {
      "street": "Douglas Extension",
      "suite": "Suite 847",
      "city": "McKenziehaven",
      "zipcode": "59590-4157",
      "geo": {
        "lat": "-68.6102",
        "lng": "-47.0653"
      }
    },
    "phone": "1-463-123-4447",
    "website": "ramiro.info",
    "company": {
      "name": "Romaguera-Jacobson",
      "catchPhrase": "Face to face bifurcated interface",
      "bs": "e-enable strategic applications"
    },
    "level": 15
  },
  {
    "id": 4,
    "name": "Patricia Lebsack",
    "username": "Karianne",
    "email": "Julianne.OConner@kory.org",
    "address": {
      "street": "Hoeger Mall",
      "suite": "Apt. 692",
      "city": "South Elvis",
      "zipcode": "53919-4257",
      "geo": {
        "lat": "29.4572",
        "lng": "-164.2990"
      }
    },
    "phone": "493-170-9623 x156",
    "website": "kale.biz",
    "company": {
      "name": "Robel-Corkery",
      "catchPhrase": "Multi-tiered zero tolerance productivity",
      "bs": "transition cutting-edge web services"
    },
    "level": 15
  }
]

【问题讨论】:

  • @Inian 我将 "level": 15 添加到每个用户对象。如果您单独卷曲 URL,您会注意到默认情况下“级别”不是用户对象的字段。我将包含单个用户前后的差异来举例说明。

标签: arrays json curl jq


【解决方案1】:

如果您知道在 forloop 中使用 jq with 将用户数据写入数组的更好解决方案,请告诉我。我真的很想了解 jq 是否可行。

如果我不必写入临时文件而是可以从文件中读取附加新的 curl 用户数据并在 for 循环中写回文件,我会更愿意,但我得到了结果和正确的 json方式。

我使用 JQ 的半体面解决方案。我最终编写了多个用户文件,然后将它们与 slurping 结合在一起。

for i in {1..4}; do
  echo -e "==> Creating a temp user json file for user${i}."
  testUrl=https://jsonplaceholder.typicode.com/users/${i}
  curl -s ${testUrl} | jq '. + {level: 15}' >> /tmp/temp_user_${i}_information_file.json
done

echo -e "==> Creating the final users json file."
jq -s '.' /tmp/temp_user_*_information_file.json > userList.json

【讨论】:

    猜你喜欢
    • 2023-04-02
    • 2020-08-24
    • 2021-03-16
    • 1970-01-01
    • 2019-06-08
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多