主页 / dba / 问题 / 40243
Accepted
maneesha
Asked: 2013-04-18 07:57:07 +0800 CST

在数据库中查找丢失的日期时间记录

  • 772

我有一个 python 脚本，每天每分钟抓取一个网页并将结果保存在 postgres 数据库中。

当我浏览数据库时，我注意到数据库中缺少了一些分钟。这可能是因为我的服务器宕机或者是因为网站宕机（但造成间隙的原因与我这里的问题无关）。

我正在尝试找出对数据库中丢失的分钟进行分类的最佳方法。

现在我有一个 python 脚本，它创建了每天每一分钟的列表，并使用该列表遍历datetime我的数据库表中的列，如下所示：

def pd(start, end, delta):
    c = start
    datelist = []
    while c < end:
        datelist.append(c)
        c += delta
    return datelist

有没有办法直接使用 SQL 来做到这一点？

postgresql python

1 个回答

  1. Best Answer

    你可以做类似的事情。首先生成会议记录（如果您经常这样做，您可能希望将它们存储在一个永久的索引表中），然后选择不在您的表中的那些。查询看起来像（没有循环！）：

    WITH minutes(m) AS (
    SELECT i::timestamp(0) 
    FROM generate_series('2013-04-17 12:00:00', '2013-04-17 13:00:00', interval '1 minute') t(i)
)
SELECT m
FROM 
    minutes
    LEFT JOIN your_table ON m = your_timestamp
WHERE your_table_id IS NULL;

    如果秒部分不为零，您可能必须转换存储的时间戳。而且，至少对于大量数据，您将需要一个在时间戳上定义的索引（your_table_id如果您使用 PostgreSQL 9.2，它可能会有很大帮助）。

    • 2

相关问题