postgresql - PostgreSQL 中的时间聚合

标签 postgresql aggregate-functions aggregation temporal-database

我正在研究使用 PostgreSQL 数据库进行时间聚合的 Java 实现。

我的 table 是这样的

Value | Start      | Stop
(int) | (Date)     | (Date)
-------------------------------
1     | 2004-01-01 | 2010-01-01
4     | 2000-01-01 | 2008-01-01

所以可视化这个时期:

                      ------------------------------
  ----------------------------------------
2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010
  [        4         ][       5=4+1      ][    1   ]

我的算法现在计算数据的时间聚合,例如求和():

Value | Start      | Stop
-------------------------------
4     | 2000-01-01 | 2004-01-01
5     | 2004-01-01 | 2008-01-01
1     | 2008-01-01 | 2010-01-01

为了测试得到的结果,我现在想直接使用PostgreSQL查询数据。我知道目前还没有解决这个问题的简单方法。但是,肯定有一种方法可以获得相同的结果。应支持聚合 Count、Max、Min、Sum 和 Average。我不介意糟糕或缓慢的解决方案,它必须有效。

到目前为止我发现的一个查询应该类似地工作如下:

select count(*), ts, te
from ( checkout a normalize checkout b using() ) checkoutNorm
group by ts, te;

我的领养是这样的:

select count(*), start, stop
from ( myTable a normalize myTable b using() ) myTableNorm
group by start, stop;

但是,报告了一个错误错误:“normalize”处或附近的语法错误——第 2 行:来自(ndbs_10 a normalize ndbs_10 b using())ndbsNorm

有没有人能解决这个问题?不一定非要基于上面的查询,只要能用就行。非常感谢。

最佳答案

你的问题真的很难理解。但我认为我明白了。
您需要对 value 求和。值仅适用于时间段的 startstop 之间。所以他们必须在该期间的开始时添加并在结束时扣除。
此外,您还需要总和有效的结果期间的开始和结束时间。
应该这样做:

-- DROP SCHEMA x CASCADE;
CREATE SCHEMA x;
CREATE TABLE x.tbl(val int, start date, stop date);
INSERT INTO x.tbl VALUES
 (4 ,'2000-01-01' ,'2008-01-01')
,(7 ,'2001-01-01' ,'2009-01-01')
,(1 ,'2004-01-01' ,'2010-01-01')
,(2 ,'2005-01-01' ,'2006-01-01');

WITH a AS (
    SELECT start as ts, val FROM x.tbl
    UNION  ALL
    SELECT stop, val * (-1) FROM x.tbl
    ORDER  BY 1, 2)
SELECT sum(val) OVER w AS val_sum
      ,ts AS start
      ,lead(ts) OVER w AS stop
FROM   a
WINDOW w AS (ORDER BY ts)
ORDER  BY ts;

val_sum |   start    |    stop
--------+------------+------------
      4 | 2000-01-01 | 2001-01-01
     11 | 2001-01-01 | 2004-01-01
     12 | 2004-01-01 | 2005-01-01
     14 | 2005-01-01 | 2006-01-01
     12 | 2006-01-01 | 2008-01-01
      8 | 2008-01-01 | 2009-01-01
      1 | 2009-01-01 | 2010-01-01
      0 | 2010-01-01 |

请求后编辑

对于所有请求的聚合函数:

SELECT period
      ,val_sum
      ,val_count
      ,val_sum::float /val_count AS val_avg
      ,(SELECT min(val) FROM x.tbl WHERE start < y.stop AND stop > y.start) AS val_min
      ,(SELECT max(val) FROM x.tbl WHERE start < y.stop AND stop > y.start) AS val_max
      ,start
      ,stop
FROM   (
    WITH a AS (
         SELECT start as ts, val, 1 AS c FROM x.tbl
         UNION  ALL
         SELECT stop, val, -1 FROM x.tbl
         ORDER  BY 1, 2)
    SELECT count(*) OVER w AS period
          ,sum(val*c) OVER w AS val_sum
          ,sum(c) OVER w AS val_count
          ,ts AS start
          ,lead(ts) OVER w AS stop
    FROM   a
    WINDOW w AS (ORDER BY ts)
    ORDER  BY ts
    ) y
WHERE stop IS NOT NULL;

 period | val_sum | val_count | val_avg | val_min | val_max |   start    |    stop
--------+---------+-----------+---------+---------+---------+------------+------------
      1 |       4 |         1 |       4 |       4 |       4 | 2000-01-01 | 2001-01-01
      2 |      11 |         2 |     5.5 |       4 |       7 | 2001-01-01 | 2004-01-01
      3 |      12 |         3 |       4 |       1 |       7 | 2004-01-01 | 2005-01-01
      4 |      14 |         4 |     3.5 |       1 |       7 | 2005-01-01 | 2006-01-01
      5 |      12 |         3 |       4 |       1 |       7 | 2006-01-01 | 2008-01-01
      6 |       8 |         2 |       4 |       1 |       7 | 2008-01-01 | 2009-01-01
      7 |       1 |         1 |       1 |       1 |       1 | 2009-01-01 | 2010-01-01

min()max 可能会被优化,但这应该足够好了。 如您所见,CTE(WITH 子句)和子查询是可交换的。

关于postgresql - PostgreSQL 中的时间聚合,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/8037397/

相关文章:

MySQL——条件分组依据

elasticsearch - 获取 HitTest 门命中数组聚合的唯一文档数sum_other_doc_count

Elasticsearch - 计算嵌套聚合相对于父存储桶的百分比

删除/创建数据库后 Django 无法同步数据库

python - 如何使用 asyncpg(pgsql) 获取 "returning id"

mysql - 拉取一列中编号最小的行

sql - 如何从相邻表中动态数量的相关行获取聚合数据

python - 如何在 python 中向 groupby 中的聚合添加函数?

postgresql - 大表上的 Postgres 慢查询

sql - Postgresql查询仅包含日期的时间戳数据