RxJava - 将 Observable 转换为 Iterator、Stream 或 Sequence

Question

我知道这违反了很多 Rx 规则，但我真的很喜欢 RxJava-JDBC，我的队友也一样。关系数据库是我们工作的核心，Rx 也是如此。

但是在某些情况下，我们不想发出 Observable<ResultSet>，而是希望只使用基于拉取的 Java 8 Stream<ResultSet> 或 Kotlin Sequence<ResultSet>。但是我们非常习惯 RxJava-JDBC 库，它只返回一个Observable<ResultSet>。

因此，我想知道是否有一种方法可以使用扩展功能将Observable<ResultSet> 转换为Sequence<ResultSet>，而不进行任何中间收集或toBlocking() 调用。以下是我目前所拥有的所有内容，但我现在正在尝试连接基于推送和拉取的系统，我也无法缓冲，因为 ResultSet 在每个 onNext() 调用中都是有状态的。这是不可能完成的任务吗？

import rx.Observable
import rx.Subscriber
import java.sql.ResultSet

fun Observable<ResultSet>.asSequence() = object: Iterator<ResultSet>, Subscriber<ResultSet>() {

    private var isComplete = false

    override fun onCompleted() {
        isComplete = true
    }

    override fun onError(e: Throwable?) {
        throw UnsupportedOperationException()
    }

    override fun onNext(rs: ResultSet?) {
        throw UnsupportedOperationException()
    }


    override fun hasNext(): Boolean {
        throw UnsupportedOperationException()
    }

    override fun next(): ResultSet {
        throw UnsupportedOperationException()
    }

}.asSequence()

Answer 1

我不确定这是实现您想要的最简单的方法，但您可以尝试此代码。它通过创建阻塞队列并将Observable 中的所有事件发布到此队列，将Observable 转换为Iterator。 Iterable 从队列中拉出事件，如果没有则阻塞。然后根据接收到的当前事件修改自己的状态。

class ObservableIterator<T>(
    observable: Observable<T>,
    scheduler: Scheduler
) : Iterator<T>, Closeable {

  private val queue = LinkedBlockingQueue<Notification<T>>()
  private var cached: Notification<T>? = null
  private var completed: Boolean = false

  private val subscription =
      observable
          .materialize()
          .subscribeOn(scheduler)
          .subscribe({ queue.put(it) })

  override fun hasNext(): Boolean {
    cacheNext()
    return !completed
  }

  override fun next(): T {
    cacheNext()
    val notification = cached ?: throw NoSuchElementException()
    check(notification.isOnNext)
    cached = null
    return notification.value
  }

  private fun cacheNext() {
    if (completed) {
      return
    }

    if (cached == null) {
      queue.take().let { notification ->
        if (notification.isOnError) {
          completed = true
          throw RuntimeException(notification.throwable)
        } else if (notification.isOnCompleted) {
          completed = true
        } else {
          cached = notification
        }
      }
    }
  }

  override fun close() {
    subscription.unsubscribe()
    completed = true
    cached = null
  }
}

Answer 2

您可以使用以下辅助函数：

fun <T> Observable<T>.asSequence() = Sequence { toBlocking().getIterator() }

当为迭代器调用返回的序列时，将订阅 observable。

如果一个 observable 在它订阅的同一线程上发出元素（例如Observable.just），它将在有机会返回之前填充迭代器的缓冲区。 在这种情况下，您可能需要通过调用 subscribeOn 来直接订阅不同的线程：

observable.subscribeOn(scheduler).asSequence()

然而，虽然toBlocking().getIterator() 不会缓冲所有结果，但如果迭代器没有及时使用它们，它可以缓冲其中一些结果。如果下一个ResultSet 到达时ResultSet 以某种方式过期，这可能是个问题。