【问题标题】:Data Migration from one DB to another从一个数据库迁移到另一个数据库
【发布时间】:2020-03-16 11:39:31
【问题描述】:

我必须创建一个应用程序,每天将数据从雪花传输到 postgres。 postgres 中的一些表在迁移之前会被截断,并复制相应雪花表中的所有数据。而对于其他表,postgres 中最后一个时间戳之后的数据是从雪花中复制的。 这项工作必须在晚上的某个时间运行,而不是在客户白天使用该服务时运行。 最好的方法是什么?

【问题讨论】:

    标签: postgresql data-migration snowflake-schema


    【解决方案1】:

    您是否有约束,限制您在以下方面的选择:

    • ETL 或批量数据工具
    • 开发语言?

    【讨论】:

    • 是的,开发语言是 java,可能首选 Spring Batch 的解决方案。
    【解决方案2】:

    根据this site,可以在Postgresql上为雪花创建外来数据包装器

    【讨论】:

      猜你喜欢
      • 2018-06-01
      • 2023-01-11
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2019-12-27
      相关资源
      最近更新 更多