【发布时间】:2021-02-05 03:40:22
【问题描述】:
我有一个客户希望每天将他们的数据从 S3 传输到 GCP 存储桶到 Google Cloud Storage 存储桶。有什么方法可以创建从 s3 到 GCS 的计划传输或定期传输。
【问题讨论】:
标签: amazon-s3 google-cloud-platform data-transfer
我有一个客户希望每天将他们的数据从 S3 传输到 GCP 存储桶到 Google Cloud Storage 存储桶。有什么方法可以创建从 s3 到 GCS 的计划传输或定期传输。
【问题讨论】:
标签: amazon-s3 google-cloud-platform data-transfer
您可以使用名为Storage Transfer的服务:https://console.cloud.google.com/transfer
您可以创建一个管道并根据需要对其进行调度并运行以将所有数据从 AWS S3 克隆到 GCP。
这里主要服务网址:https://cloud.google.com/storage-transfer-service
你可以使用storage transfer service来传输bucket数据
它还支持 TSV 文件。
您可以将此服务配置为在每天的特定时间运行。
【讨论】: