如何存储更改数据 (CDC) SQL Server 2012

Question

我已经详细阅读了几次设置CDC features in SQL Server 2012。然而，有一个非常令人困惑的图形

这似乎表明您的 CDC 数据可以存储在另一个数据库（数据仓库）中。然而，这不是我认为真正“存储”它的东西。

当您按照设置“data collection”单元的说明进行操作时，没有 ETL 功能。我对数据收集的理解是随着时间的推移监控您的数据库活动，而不是返回并查看对特定行集的更改。

所以我一定错过了一些基本的逻辑。是否有某种神奇的 CDC 功能可以批量插入或从 cdc 可更改表中移动数据（默认情况下仅保留 3 天），或者我是否需要为我为 CDC 设置的每个表编写自定义 SSIS/ETL 作业？我可以编写 SSIS 作业，但似乎这很可能不是正确的方法。如果有人能指出我处理在另一个数据库或实例上存储 cdc 数据的教程，我将不胜感激。我的搜索只是不断将我指向数据收集或 cdc，而这些都没有真正存储 100% 的更改历史记录。

感谢您的编辑请求。我在想这很混乱：

我的要求如下：

1. 捕获一组特定表上的所有更改（CDC 来拯救它并且有效）

2. 将更改数据存储在不同的关系数据库中 7 年。 IE。能够返回到特定记录并在任何时间段内对其进行的所有更改。 （这是让我对 MSDN 图形和明显解决方案感到困惑的部分）。

3. 如果可能，数据 ETL 作业应实时完成（而不是分批或按计划）

Answer 1

作为一种技术，CDC 主要用于帮助使辅助数据存储（例如数据仓库）与主数据存储发生的变化保持同步。也就是说，没有什么说你不能做你想做的事情 CDC。本质上，您将在您有兴趣跟踪更改的表上设置 CDC，并定期致电cdc.fn_cdc_get_all_changes... 或cdc.fn_cdc_get_net_changes...（以适合您的情况为准，尽管我会根据您的描述猜测所有更改）要获取这些表的更改，此时您会将原始 cdc 数据存储到您指定用于保存它的另一个表中。

但是请注意，保留要求是粗略的。例如，您不能只在保留期结束后删除记录，因为只要记录仍然处于活动状态，您就需要一条完整的更改链返回到记录的原始插入。