【发布时间】:2021-07-22 11:15:39
【问题描述】:
我试图了解 Apache Beam 中 ValueProvider 类的用途。我在一些示例中看到 Pipeline 选项值由 ValueProvider 包装。但是我无法获得任何相关文档来理解这个类。
【问题讨论】:
标签: google-cloud-dataflow apache-beam data-pipeline
我试图了解 Apache Beam 中 ValueProvider 类的用途。我在一些示例中看到 Pipeline 选项值由 ValueProvider 包装。但是我无法获得任何相关文档来理解这个类。
【问题讨论】:
标签: google-cloud-dataflow apache-beam data-pipeline
它专门用于创建数据流Flexi模板或者我们可以称之为自定义数据流模板。对于 PUBSUB 主题/订阅链接、临时位置、GCS 存储桶、大查询数据集和表等值,所有这些可配置参数都可以在模板中传递,并使这些模板可重用和可部署。你可以进一步阅读这个here
【讨论】: