如何在 Postgres 中获取时间间隔的平均值

Question

我使用的是 PostgreSQL 9.6。我有一张这样的桌子：

mac   sn         loc   time     date      vin1    vin2    vin3
1a34 4as11111111 aaaa  7:06:18  1/1/2018  447.42  472.32  682.59
1a34 4as11111111 aaaa  7:06:43  1/1/2018  455.97  476.25  682.59
1a34 4as11111111 aaaa  7:07:35  1/1/2018  470.88  484.2   682.5

我需要在 300 秒（5 分钟）的时间间隔内计算 vin1、vin2、vin3 的平均值。例如，对于范围内的日期，从第一次 (7:06:18 - 7:11:18) 开始。我可以通过这个查询选择我需要的数据：

select * from table
where sn='4as11111111' and date between '2018-01-01' and '2018-01-02';

但我不知道如何按 300 秒的时间间隔对其进行分组，并计算这 5 分钟间隔的 vin1、vin2、vin3 列的平均值，以获得如下结果：

mac  sn          loc     time     date      vin1_av  vin2_av  vin3_av
1a34 4as11111111 aaaa   7:06:18  1/1/2018  450.0    480.32   600.59
1a34 4as11111111 aaaa   7:11:18  1/1/2018  460.0    490.25   782.59
1a34 4as11111111 aaaa   7:16:18  1/1/2018  470.88   500.2    600.5

任何帮助将不胜感激。

Answer 1

数据库设计

虽然您可以使用单独的 date 和 time 列，但与单个 timestamp 列相比确实没有优势。我会适应：

ALTER TABLE tbl ADD column ts timestamp;
UPDATE tbl SET ts = date + time;  -- assuming actual date and time types
ALTER TABLE tbl DROP column date, DROP column time;

如果日期和时间不是实际的 date 和 time 数据类型，请使用 to_timestamp()。相关：

• Calculating Cumulative Sum in PostgreSQL
• How to convert "string" to "timestamp without time zone"

查询

那么查询就简单一点了：

SELECT *
FROM  (
   SELECT sn, generate_series(min(ts), max(ts), interval '5 min') AS ts
   FROM   tbl
   WHERE  sn = '4as11111111'
   AND    ts >= '2018-01-01'
   AND    ts <  '2018-01-02'
   GROUP  BY 1
   ) grid
CROSS  JOIN LATERAL (
   SELECT round(avg(vin1), 2) AS vin1_av
        , round(avg(vin2), 2) AS vin2_av
        , round(avg(vin3), 2) AS vin3_av
   FROM   tbl
   WHERE  sn =  grid.sn
   AND    ts >= grid.ts
   AND    ts <  grid.ts + interval '5 min'
   ) avg;

db小提琴here

在第一个子查询grid 中生成一个开始时间网格，从给定时间范围内的第一行到最后一个限定行。

使用LATERAL 连接加入每个分区中的行，并立即聚合子查询avg 中的平均值。由于聚合，它总是返回一行，即使没有找到条目。在这种情况下，平均值默认为 NULL。

结果包括给定时间范围内第一个和最后一个合格行之间的所有时间段。其他各种结果组合也很有意义。就像在给定的时间范围内包含 所有 个时隙，或者只包含具有实际值的时隙。一切可能，我必须选择一种解释。

索引

至少有这个多列索引：

CRATE INDEX foo_idx ON tbl (sn, ts);

或在(sn, ts, vin1, vin2, vin3) 上允许仅索引扫描 - 如果满足某些先决条件，特别是如果表行比演示中的行宽得多。

密切相关：

• Slow LEFT JOIN on CTE with time intervals
• Best way to count records by arbitrary time intervals in Rails+Postgres

基于您的原始表格

As requested and clarified in the comment，后来在问题中再次更新以包含mac 和loc 列。我假设您想要每个 (mac, loc) 的单独平均值。

date 和time 仍然是单独的列，vin* 列是float 类型，并且排除没有行的时隙：

更新后的查询还将 set-returning 函数 generate_series() 移动到 FROM 列表中，这在 Postgres 10 之前更清晰：

SELECT t.mac, sn.sn, t.loc, ts.ts::time AS time, ts.ts::date AS date
     , t.vin1_av, t.vin2_av, t.vin3_av
FROM  (SELECT text '4as11111111') sn(sn)  -- provide sn here once
CROSS  JOIN LATERAL (
   SELECT min(date+time) AS min_ts, max(date+time) AS max_ts
   FROM   tbl
   WHERE  sn = sn.sn
   AND    date+time >= '2018-01-01 0:0'   -- provide time frame here
   AND    date+time <  '2018-01-02 0:0'
   ) grid
CROSS  JOIN LATERAL generate_series(min_ts, max_ts, interval '5 min') ts(ts)
CROSS  JOIN LATERAL (
   SELECT mac, loc
        , round(avg(vin1)::numeric, 2) AS vin1_av  -- cast to numeric for round()
        , round(avg(vin2)::numeric, 2) AS vin2_av  -- but rounding is optional
        , round(avg(vin3)::numeric, 2) AS vin3_av
   FROM   tbl
   WHERE  sn = sn.sn
   AND    date+time >= ts.ts
   AND    date+time <  ts.ts + interval '5 min'
   GROUP  BY mac, loc
   HAVING count(*) > 0  -- exclude empty slots
   ) t;

创建一个多列表达式索引来支持这一点：

CRATE INDEX bar_idx ON tbl (sn, (date+time));

db小提琴here

但我更愿意一直使用timestamp。