AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 246714
Accepted
roy naufal
roy naufal
Asked: 2019-09-02 04:48:14 +0800 CST2019-09-02 04:48:14 +0800 CST 2019-09-02 04:48:14 +0800 CST

获取给定时间段内每天只存在一次的行

  • 772

我有一个案例,我想提取DID在特定时间段内每天存在一次且仅存在一次的设备 ID ( )。我尝试了不同的方法和分区,但我似乎只能每天单独获取该数据(where date = X),但我需要使用where date between X and Y.

示例数据:

DID date     
A   2019-01-01
A   2019-01-01
A   2019-01-02
A   2019-01-03
B   2019-01-01
B   2019-01-02
B   2019-01-03
C   2019-01-01
C   2019-01-02
C   2019-01-02
C   2019-01-03
D   2019-01-01
D   2019-01-02
D   2019-01-03

查询应该只返回B & D因为从 01 到 03 每天存在一次。
我还希望得到count,在这种情况下为2

postgresql relational-division
  • 3 3 个回答
  • 467 Views

3 个回答

  • Voted
  1. jjanes
    2019-09-02T06:57:29+08:002019-09-02T06:57:29+08:00
    select did from foobar2 where 
        date between '2019-01-01' and '2019-01-03' 
        group by did 
        having count(distinct date)=3 and count(date)=3;
    

    如果每个日期至少有一个,但有多个日期,则 count(date) 将 > 3。如果某个日期少于一个,则 count(distinct date) 将 < 3。

    我也希望得到计数,在这种情况下为 2

    弄清楚 B 和 D 的基数为 2 似乎很容易。这真的需要在查询中完成吗?如果是这样,请使用窗口函数

    select did, count(*) over () from foobar2 where 
        date between '2019-01-01' and '2019-01-03' 
        group by did 
        having count(distinct date)=3 and count(date)=3;
    
    • 4
  2. Philᵀᴹ
    2019-09-02T07:05:57+08:002019-09-02T07:05:57+08:00

    测试表:

    create table se246714 (
    did char(1), 
    dt  date 
    );
    

    测试数据:

    insert into se246714 values
    ('A',   '2019-01-01'),
    ('A',   '2019-01-01'),
    ('A',   '2019-01-02'),
    ('A',   '2019-01-03'),
    ('B',   '2019-01-01'),
    ('B',   '2019-01-02'),
    ('B',   '2019-01-03'),
    ('C',   '2019-01-01'),
    ('C',   '2019-01-02'),
    ('C',   '2019-01-02'),
    ('C',   '2019-01-03'),
    ('D',   '2019-01-01'),
    ('D',   '2019-01-02'),
    ('D',   '2019-01-03'); 
    

    很容易做到did每天只发生一次:

      select did, dt, count(*) 
      from se246714
      group by did,dt
      having count(*)=1; 
    

    结果:

    did dt          count
    A   2019-01-02  1
    A   2019-01-03  1
    B   2019-01-01  1
    B   2019-01-02  1
    B   2019-01-03  1
    C   2019-01-01  1
    C   2019-01-03  1
    D   2019-01-01  1
    D   2019-01-02  1
    D   2019-01-03  1
    

    这是它变得更加复杂的地方。这完全取决于你想如何传递日期......

    我假设您想从表中的完整数据集中获取日期范围。如果您不这样做,您可以修改 CTE 以提供开始和结束日期。

    我将从答案的扩展版本开始,以演示它是如何工作的。

    with rowsperday as (
      select did, dt, count(*) 
      from se246714
      group by did,dt
      having count(*)=1 
    ),
    startdate as ( select min(dt) as startdate from se246714 ),
    enddate as ( select max(dt) as enddate from se246714 ),
    numdays as ( select enddate - startdate + 1 as numdays from startdate,enddate )
    select did, count(*)
    from rowsperday, numdays
    group by did, numdays
    having count(*) = numdays
    ;
    

    我们计算日期的差异以获得所涉及的天数,然后检查dids 的计数以查看它们是否每天都出现。

    瘦身版:

    with rowsperday as (
      select did, dt, count(*) 
      from se246714
      group by did,dt
      having count(*)=1 
    )
    select did, count(*)
    from rowsperday
    group by did
    having count(*) = (select max(dt) - min(dt) + 1 from rowsperday)
    ;
    

    如果您想知道这些东西是什么,请在此处with .... as (阅读公用表表达式。

    小提琴链接在这里。

    • 3
  3. Best Answer
    Erwin Brandstetter
    2019-09-02T14:48:59+08:002019-09-02T14:48:59+08:00

    这是关系除法的特例。谓词日期恰好是按顺序排列的,重复的被排除在外。有许多可能的解决方案。最佳匹配取决于完整的用例。

    例如,如果did您需要优化性能并且您的表很大并且该列具有高基数并且通常只有少数did符合条件并且在 上有一个索引(dt, did),那么这个查询应该比使用&的查询快得多:GROUP BYcount()

    SELECT did
    FROM   tbl t1
    JOIN   tbl t2  USING (did)
    JOIN   tbl t3  USING (did)
    WHERE  t1.dt = '2019-01-01'
    AND    t2.dt = '2019-01-02'
    AND    t3.dt = '2019-01-03'
    AND    NOT EXISTS (SELECT FROM tbl t1x WHERE t1x.dt = '2019-01-01' AND t1x.did = t1.did AND t1x.ctid <> t1.ctid)
    AND    NOT EXISTS (SELECT FROM tbl t2x WHERE t2x.dt = '2019-01-02' AND t2x.did = t2.did AND t2x.ctid <> t2.ctid)
    AND    NOT EXISTS (SELECT FROM tbl t3x WHERE t3x.dt = '2019-01-03' AND t3x.did = t3.did AND t3x.ctid <> t3.ctid);
    

    为什么?因为它可以通过一些相对非常便宜的索引(仅)扫描来回答您的查询,并尽早排除不合格的行,而基于查询的查询GROUP BY始终必须处理整个表。

    ctid在我的示例中,可以安全地回退以识别各个列,而我们不知道您的实际设计。

    对于长日期范围,这会变得冗长。动态生成查询可能是值得的。或者混合的方法可能是有意义的。或者使用递归 CTE使其简短且仍然非常快:

    WITH RECURSIVE rcte AS (
       SELECT did, dt
       FROM   tbl t
       WHERE  dt = '2019-01-01'    -- lower bound
       AND    NOT EXISTS (SELECT FROM tbl x WHERE x.dt = t.dt AND x.did = t.did AND x.ctid <> t.ctid)
    
       UNION ALL
       SELECT t.did, t.dt
       FROM   rcte r
       JOIN   tbl  t USING (did)
       WHERE  r.dt < '2019-01-03'  -- upper bound
       AND    t.dt = r.dt + 1
       AND    NOT EXISTS (SELECT FROM tbl x WHERE x.dt = t.dt AND x.did = t.did AND x.ctid <> t.ctid)
       )
    SELECT array_agg(did) AS dids, count(*)
    FROM   rcte
    WHERE  dt = '2019-01-03'       -- found 1 row from lower to upper bound
    

    此变体返回一组合格的 ID 和一个计数。

    db<>在这里摆弄

    相关:(推荐阅读!)

    • 用于查找具有特定数量关联的行的 SQL 查询

    这一切都取决于实际的完整用例。

    还有相关的:

    • 根据不定数量的过滤器选择行
    • 3

相关问题

  • 我可以在使用数据库后激活 PITR 吗?

  • 运行时间偏移延迟复制的最佳实践

  • 存储过程可以防止 SQL 注入吗?

  • PostgreSQL 中 UniProt 的生物序列

  • PostgreSQL 9.0 Replication 和 Slony-I 有什么区别?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve