如何在 Postgres 中对 json 数据进行计算

Question

我将 AdWords 报告数据存储在 Postgres 中。每个报告都存储在一个名为 Reports 的表中，该表有一个名为“data”的 jsonb 列。每个报告都有 json 存储在其“数据”字段中，如下所示：

[
  {
    match_type: "exact",
    search_query: "gm hubcaps",
    conversions: 2,
    cost: 1.24
  },
  {
    match_type: "broad",
    search_query: "gm auto parts",
    conversions: 34,
    cost: 21.33
  },
  {
    match_type: "phrase",
    search_query: "silverdo headlights",
    conversions: 63,
    cost: 244.05
  }
]

我想要做的是查询这些数据哈希并总结给定报告的总转化次数。我查看了 Postgresql 文档，看起来你只能对哈希进行计算，而不是像这样的哈希数组。我正在尝试在 postgres 中做些什么？我是否需要从这个数组中创建一个临时表并对其进行计算？或者我可以使用存储过程吗？

我使用的是 Postgresql 9.4

编辑 我不只是使用常规的规范化表格的原因是，这只是报告数据结构的一个示例。在我的项目中，报告必须允许任意键，因为它们是由用户上传 CSV 和他们喜欢的任何列来填充的。它基本上只是一种解决任意数量的用户创建表的方法。

Answer 1

我想要做的是查询这些数据哈希并总结转换

最快的方法应该是jsonb_populate_recordset()。但是你需要一个注册的行类型。

CREATE TEMP TABLE report_data (
--   match_type text    -- commented out, because we only need ..
-- , search_query text  -- .. conversions for this query
     conversions int
-- , cost numeric
);

临时表是临时注册行类型的一种方法。此相关答案中的更多解释：

• jsonb query with nested objects in an array

假设一个表 report 和 report_id 作为缺少信息的 PK。

SELECT r.report_id, sum(d.conversions) AS sum_conversions
FROM   report r
LEFT   JOIN LATERAL jsonb_populate_recordset(null::report_data, r.data) d ON true
-- WHERE  r.report_id = 12345  -- only for given report?
GROUP  BY 1;

LEFT JOIN 可确保您获得结果，即使 data 为 NULL 或空或 JSON 数组为空。

对于基础表中单行的总和，这更快：

SELECT d.sum_conversions
FROM   report r
LEFT   JOIN LATERAL (
   SELECT sum(conversions) AS sum_conversions
   FROM   jsonb_populate_recordset(null::report_data, r.data)
   ) d ON true
WHERE  r.report_id = 12345;  -- enter report_id here

jsonb_array_elements() 的替代品（不需要注册的行类型）：

SELECT d.sum_conversions
FROM   report r
LEFT   JOIN LATERAL (
   SELECT sum((value->>'conversions')::int) AS sum_conversions
   FROM   jsonb_array_elements(r.data)
   ) d ON true
WHERE  r.report_id = 12345;  -- enter report_id here

通常，您会将其实现为普通的规范化表。我在这里看不到 JSON 的好处（除了您的应用程序似乎需要它，就像您添加的那样）。

Answer 2

你可以使用unnest:

select sum(conv) from
(select d->'conversion' as conv from
(select unnest(data) as d from <your table>) all_data
) all_conv

免责声明：我没有 Pg 9.2，所以我无法自己测试。

编辑：这是假设您提到的数组是 Postgresql 数组，即您的 data 列的数据类型是 character varying[]。如果您的意思是 data 是一个 json 数组，您应该可以使用 json_array_elements 而不是 unnest。