【发布时间】:2017-04-10 02:52:21
【问题描述】:
我了解 SPARK 会维护 RDD 的沿袭信息。假设我有一个 RDD “a”,并对其进行了一些转换,我生成了一个新的 RDD “b”。在这种情况下,“a”是“b”的父 RDD。是否可以通过引用父指针从RDD“b”取回RDD“a”?
谢谢!
【问题讨论】:
标签: apache-spark spark-streaming
我了解 SPARK 会维护 RDD 的沿袭信息。假设我有一个 RDD “a”,并对其进行了一些转换,我生成了一个新的 RDD “b”。在这种情况下,“a”是“b”的父 RDD。是否可以通过引用父指针从RDD“b”取回RDD“a”?
谢谢!
【问题讨论】:
标签: apache-spark spark-streaming
这取决于真正的问题是什么:
compute 方法的大部分实现都是必需的。【讨论】: