【问题标题】:How to get the Dataflow template of a Dataprep job?如何获取 Dataprep 作业的数据流模板?
【发布时间】:2022-07-04 23:34:47
【问题描述】:

大家早上好,我工作的客户将在 10 月弃用 Dataprep,我们目前使用 Google Cloud Platform 进行所有工作。

Dataprep 是在数据流下运行的“漂亮”层,

目前,已实现的解决方案之一包括:在存储桶中接收文件,并使用 python 执行数据准备。

https://www.trifacta.com/blog/automate-cloud-dataprep-pipeline-data-warehouse/

我需要知道如何获取这些数据准备作业的模板,以便在存储桶中收到文件时,我可以触发与该数据准备对应的数据流,以及是否可以从解决方案中消除数据准备。

https://mbha-phoenix.medium.com/running-cloud-dataprep-jobs-on-cloud-dataflow-for-more-control-37ed84e73cf3

Dataprep 之前允许您执行此操作,但此选项不再可用。

Screenshot: "Export Result Window"

感谢您的帮助。

非常感谢

干杯

【问题讨论】:

    标签: google-cloud-platform google-cloud-dataflow dataflow google-cloud-dataprep


    【解决方案1】:

    导出选项在 DataPrep 中不再可用。从DataPrep -> Job History,可以查看之前执行的Dataflow作业,但是不能导出

    【讨论】:

      猜你喜欢
      • 2018-10-17
      • 1970-01-01
      • 1970-01-01
      • 2021-05-08
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2021-10-24
      • 2019-11-22
      相关资源
      最近更新 更多