AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 245865
Accepted
Enrique Zavaleta
Enrique Zavaleta
Asked: 2019-08-22 04:48:46 +0800 CST2019-08-22 04:48:46 +0800 CST 2019-08-22 04:48:46 +0800 CST

不删除更改表中的 CDC 记录有哪些缺点?

  • 772

如果我做这样的事情:

USE AdventureWorks2012;
GO  
EXECUTE sys.sp_cdc_change_job   
    @job_type = N'cleanup',  
    @retention = 52494800; -- (100 years)
GO 

更改表中的记录永远不会被删除(直到 2119 年)。

另外,每次将新列添加到跟踪表时,我都会应用这样的脚本将数据从旧实例移动到新实例,并且我知道如果有很多记录,可能需要一点是时候将它们复制到新的更改表中了。

因此,我计划将更改历史记录永久保存在这些更改表上,并且永远不要使用清理作业清除这些表。但是文档说:

如果您不定期系统地修剪数据,存储在更改表中的数据将无法管理地增长

如果 CDC 从 2007 年开始就在我的数据库中,最大的常见更改表将在 12 年内包含约 20K 行,源表被复制到另一台服务器,所以,话虽如此:

  • “无法控制地增长”对我意味着什么?
  • 它会对数据库中的性能或存储产生非常负面的影响吗?也许对复制性能有影响?
  • 我在没有清理工作的情况下做 CDC 就可以了吗?或者
  • 使用 SSIS 包或运行存储过程的作业将数据复制到报告数据库是更好的选择吗?
    • 如果是这样,是否有一种简单的方法可以根据更改表中添加的新列来处理在目标表中创建新列?
  • 如果一个更改表中有 100 万行而不是 20K 行,答案是否会改变?
sql-server replication
  • 1 1 个回答
  • 264 Views

1 个回答

  • Voted
  1. Best Answer
    S3S
    2019-08-22T06:48:09+08:002019-08-22T06:48:09+08:00

    “变得难以管理”对我意味着什么?

    这一切都取决于您的环境。如果您有一个受大量事务处理的数据库(一个具有大量 CRUD 操作的数据库),那么该表的增长速度将比一个更改最少的表增长得更快且更大,从而使其更难管理。

    它会对数据库中的性能或存储产生非常负面的影响吗?也许对复制性能有影响?

    更改表越大,用于在另一个实例上存储数据的 ETL / 更改数据查询函数运行时间就越长(它们会更慢)。您没有说您将这些记录存储在其他地方,或者只是使用更改表作为您的审计终点,但似乎是后者。

    我在没有清理工作的情况下做 CDC 就可以了吗?

    如果您的更改表预计不会增长 > 20K 行,您可能不会看到性能负担。

    使用 SSIS 包或运行存储过程的作业将数据复制到报告数据库是更好的选择吗?如果是这样,是否有一种简单的方法可以根据更改表中添加的新列来处理在目标表中创建新列?

    基于这个问题,并且您声明您已经有一个将数据复制到另一台服务器的脚本这一事实,您似乎正在尝试以多种方式捕获更改。您可能想要探索的一种方法是System-Versioned Temporal Tables。这对您来说可能是最简单的路线,并且可以消除 CDC 和您的 SSIS / 自定义脚本,尤其是因为您的 DML 事件似乎很低。当您对源表进行 DDL 更改时,这些表也会发生变化。

    如果一个更改表中有 100 万行而不是 20K 行,答案是否会改变?

    因为这将是行数的 50 倍,所以当然,您可以预期针对这些更改表的任何查询的性能会产生不同的结果。

    • 2

相关问题

  • 运行时间偏移延迟复制的最佳实践

  • 什么时候应该使用唯一约束而不是唯一索引?

  • 死锁的主要原因是什么,可以预防吗?

  • 如何确定是否需要或需要索引

  • PostgreSQL 9.0 Replication 和 Slony-I 有什么区别?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve