Spark中的过滤器功能答案

【问题标题】：Filter function in SparkSpark中的过滤器功能
【发布时间】：2014-11-01 19:54:19
【问题描述】：

我在 Spark 中使用 scala 编写了以下代码：

（inactiveIDs 是 RDD[(Int, Seq[String])]，persons 是 Broadcast[RDD[(Int, Seq[Event])]]，Event 是我创建的类）

val test = persons.value
  .map{tuple => (tuple._1, tuple._2
  .filter{event => inactiveIDs.filter(event2 => event2._1 == tuple._1).count() != 0})}

还有以下错误：

java.lang.NullPointerException

有什么想法吗？

【问题讨论】：

【解决方案1】：

我找到了解决方案。我无法在另一个过滤器中过滤 rdd

【讨论】：