【发布时间】:2021-02-02 04:54:28
【问题描述】:
我有一个用例,我需要从 composer 执行 dataproc 工作流模板。我正在使用一组 gcloud 命令来执行工作流模板的创建和实例化。 现在我想从作曲家实现它,所以我有两个可用于实现的选项: - 使用 bashoperator 运行 gcloud 命令批处理文件 - 创建模板,然后使用 DataprocWorkflowTemplateInstantiateOperator 进行实例化
我需要知道推荐什么方法以及为什么?
【问题讨论】:
标签: airflow google-cloud-dataproc google-cloud-composer