主页 / user-286228

Brunaldo's questions

Martin Hope
Brunaldo
Asked: 2024-03-07 01:32:11 +0800 CST
  • 5

我有表 A 和表 A 其中有

Table A
id, start_date, end_date

Table B
id, table_a_id, archive_date

我想返回表B中缺少的日期，即不在table_a start_date和end_date范围内的日期

我怎样才能在 cockroachdb 中做到这一点？

我尝试过使用generate_series，但出现未知签名错误，generate_series 不采用（日期、日期、间隔）

WITH date_series AS (
  SELECT generate_series(
    (SELECT w.export_start_date FROM table_a w WHERE w.id = 123),
    (SELECT w.export_end_date FROM table_a w WHERE w.id = 123),
    '1 day'::interval) AS missing_date
)
SELECT ds.missing_date
FROM date_series ds
LEFT JOIN table_b a ON a.table_a_id =  123
postgresql
Martin Hope
Brunaldo
Asked: 2024-02-15 03:45:44 +0800 CST
  • 6

我有一个要求，必须将过去 N 天的记录从一个表移动original_table到另一个表。new_table

下面是我执行此操作的基本脚本的一个小示例。

while True:

    result = INSERT INTO new_table (SELECT * FROM original_table WHERE (crdb_internal_expiration > (current_timestamp() + INTERVAL 'X days')) ORDER BY (unique_id) DESC LIMIT batch_limit OFFSET starting_point);

    if result.rowcount < batch_size:
        break
    offset += batch_size

问题是我们必须及时在表之间移动记录，目前移动 LIMIT 为 10_000 的记录每次大约需要 30 秒。假设过去 2 天我们有大约 200 万条记录，我们希望限制停机时间。

我们这样做的原因是因为我们需要在表中使用列族，但 cockroachdb 不允许我们更改现有表来添加新的列族（如果它还没有）。

有什么方法可以优化这个查询，使其运行得更快吗？也许不使用OFFSET并跟踪记录id 会更快？

AND id > last_processed_id
ORDER BY id DESC
LIMIT 100;

cockroachdb 版本为 23

select