foreachRDD 什么时候返回 N 个 RDD？

Question

根据 stackoverflow 36421619 的一篇很好的帖子，Spark Streaming 中的 foreachRDD 已经进行了一些讨论。不过，我觉得在阅读散文时答案还不够清楚。所以这里...

我的问题是：

1. 什么时候 foreachRDD ... 返回超过 1 个 RDD？ N个批次的滑动窗口？
2. 如果我们只是按批次进行处理，那么会声明一个 RDD，所以呢？

我注意到，最常见的用例似乎是持久化到外部存储。这似乎是大多数输出​​操作的指南。我不知何故错过了一些东西。

Answer 1

仅适用于窗口操作，否则 1 microbatch = 1 RDD。