【问题标题】:Which persistent storage is used by Dataflow to keep persistent state implemented with Apache Beam Timers?Dataflow 使用哪种持久存储来保持通过 Apache Beam 计时器实现的持久状态?
【发布时间】:2019-04-03 05:39:22
【问题描述】:

没有说清楚,但我想 Dataflow 可以使用Persistent Disk Resources

无论如何我找不到确认。

我想知道我是否可以假设使用 Timers 的限制和预期性能与此处提供的相同:https://cloud.google.com/compute/docs/disks/performance

【问题讨论】:

    标签: google-compute-engine google-cloud-dataflow apache-beam


    【解决方案1】:

    Dataflow 使用永久性磁盘来存储计时器。但是还涉及大量缓存,因此性能应该比仅从永久性磁盘读取更好。

    【讨论】:

    • 感谢您的回复,是否以某种方式记录在案?
    • 鉴于这是一个实施细节,我认为它没有记录在案,但我会与相关人员核实:)
    猜你喜欢
    • 2018-07-04
    • 2018-12-28
    • 1970-01-01
    • 2015-04-06
    • 1970-01-01
    • 2015-07-25
    • 2013-12-31
    • 1970-01-01
    • 2023-04-08
    相关资源
    最近更新 更多