使用 OGG 复制（初始加载）到 Kafka 的数据库复制

【问题标题】：Database replication using OGG replication (initial load) to Kafka使用 OGG 复制（初始加载）到 Kafka 的数据库复制
【发布时间】：2021-02-10 08:00:58
【问题描述】：

我在通过 OGG Replicate（从文件加载数据到复制）复制到 Kafka 时遇到问题。由于服务器上的 HDD 大小限制，Kafka 主题大小不可扩展。我需要通过（初始加载）复制加载 200 GB（来自 1 个表）的数据，但远程服务器上只有 100 GB 的可用空间。是否有任何选项可以限制复制？

【问题讨论】：

标签： oracle apache-kafka database-replication oracle-golden-gate

【解决方案1】：

不确定我是否完全理解您的问题。如果您在目标上保存数据的空间较少，那么您唯一的选择是过滤源上的数据，仅提取部分数据并复制它们。我确信这可以通过在初始加载中添加 sql 谓词来实现，也许可以查看下面的支持说明

Oracle 支持文档 971785.1（如何将“SQLPREDICATE”用于带有“WHERE”子句的初始负载提取？）可在以下位置找到：https://support.oracle.com/epmos/faces/DocumentDisplay?id=971785.1

【讨论】：