【问题标题】:Cartesian product of streams in Java 8 as stream (using streams only)Java 8 中流的笛卡尔积作为流(仅使用流)
【发布时间】:2015-12-14 09:32:58
【问题描述】:

我想创建一个方法来创建元素流,这些元素流是多个给定流的笛卡尔积(最后由二元运算符聚合为相同类型)。请注意,参数和结果都是流,不是集合。

例如,对于 {A, B}{X, Y} 的两个流,我希望它产生值流 {AX, AY , BX, BY}(简单连接用于聚合字符串)。到目前为止,我已经想出了这个代码:

private static <T> Stream<T> cartesian(BinaryOperator<T> aggregator, Stream<T>... streams) {
    Stream<T> result = null;

    for (Stream<T> stream : streams) {
        if (result == null) {
            result = stream;
        } else {
            result = result.flatMap(m -> stream.map(n -> aggregator.apply(m, n)));
        }
    }

    return result;
}

这是我想要的用例:

Stream<String> result = cartesian(
  (a, b) -> a + b, 
  Stream.of("A", "B"), 
  Stream.of("X", "Y")
);

System.out.println(result.collect(Collectors.toList()));

预期结果:AX, AY, BX, BY

另一个例子:

Stream<String> result = cartesian(
  (a, b) -> a + b, 
  Stream.of("A", "B"), 
  Stream.of("K", "L"), 
  Stream.of("X", "Y")
);

预期结果:AKX, AKY, ALX, ALY, BKX, BKY, BLX, BLY

但是,如果我运行代码,我会收到以下错误:

IllegalStateException:流已被操作或关闭

流在哪里消费?通过平面地图?可以轻松解决吗?

【问题讨论】:

标签: java set java-8 java-stream cartesian-product


【解决方案1】:

在您的示例中传递流永远比传递列表更好:

private static <T> Stream<T> cartesian(BinaryOperator<T> aggregator, List<T>... lists) {
    ...
}

并像这样使用它:

Stream<String> result = cartesian(
  (a, b) -> a + b, 
  Arrays.asList("A", "B"), 
  Arrays.asList("K", "L"), 
  Arrays.asList("X", "Y")
);

在这两种情况下,您都从 varargs 创建一个隐式数组并将其用作数据源,因此懒惰是虚构的。您的数据实际上存储在数组中。

在大多数情况下,生成的笛卡尔积流比输入要长得多,因此实际上没有理由让输入变得懒惰。例如,有五个包含五个元素的列表(总共 25 个),您将获得 3125 个元素的结果流。所以在内存中存储 25 个元素并不是什么大问题。实际上在大多数实际情况下,它们已经存储在内存中。

为了生成笛卡尔积流,您需要不断“倒带”所有流(第一个除外)。要倒带,流应该能够一次又一次地检索原始数据,或者以某种方式缓冲它们(你不喜欢)或者从源(集合、数组、文件、网络、随机数等)再次获取它们。 ) 并一次又一次地执行所有中间操作。如果您的源和中间操作很慢,那么惰性解决方案可能比缓冲解决方案慢得多。如果您的来源无法再次生成数据(例如,随机数生成器无法生成之前生成的相同数字),则您的解决方案将不正确。

尽管如此,完全懒惰的解决方案是可能的。不要使用流,而是使用流供应商:

private static <T> Stream<T> cartesian(BinaryOperator<T> aggregator,
                                       Supplier<Stream<T>>... streams) {
    return Arrays.stream(streams)
        .reduce((s1, s2) -> 
            () -> s1.get().flatMap(t1 -> s2.get().map(t2 -> aggregator.apply(t1, t2))))
        .orElse(Stream::empty).get();
}

该解决方案很有趣,因为我们创建并减少供应商流以获取最终的供应商并最终调用它。用法:

Stream<String> result = cartesian(
          (a, b) -> a + b, 
          () -> Stream.of("A", "B"), 
          () -> Stream.of("K", "L"), 
          () -> Stream.of("X", "Y")
        );
result.forEach(System.out::println);

【讨论】:

  • 感谢您的精彩回答!我喜欢这两种解决方案,你是对的。可能没有合理的例子表明在输入中优先使用流是有意义的。
  • 我只是关心这里的效率。似乎您正在有效地创建一个随后调用的供应商堆栈。创建像列表这样的中间结构会更好吗,即List&lt;T&gt;... lists 而不是streams 数组?
【解决方案2】:

stream 在第二次迭代的flatMap 操作中被消耗。因此,每次map 结果时,您都必须创建一个新流。因此,您必须提前收集stream 才能在每次迭代中获得新的流。

private static <T> Stream<T> cartesian(BiFunction<T, T, T> aggregator, Stream<T>... streams) {
    Stream<T> result = null;
    for (Stream<T> stream : streams) {
        if (result == null) {
            result = stream;
        } else {
            Collection<T> s = stream.collect(Collectors.toList());
            result = result.flatMap(m -> s.stream().map(n -> aggregator.apply(m, n)));
        }
    }
    return result;
}

甚至更短:

private static <T> Stream<T> cartesian(BiFunction<T, T, T> aggregator, Stream<T>... streams) {
    return Arrays.stream(streams).reduce((r, s) -> {
        List<T> collect = s.collect(Collectors.toList());
        return r.flatMap(m -> collect.stream().map(n -> aggregator.apply(m, n)));
    }).orElse(Stream.empty());
}

【讨论】:

  • 非常感谢!您认为有什么方法可以在不缓冲的情况下做到这一点?
  • @voho 我认为这是不可能的。
  • 我觉得奇怪的是它有效:Collection s = stream.collect(Collectors.toList());结果 = result.flatMap(m -> s.stream().map(n -> aggregator.apply(m, n)));但这不是: Stream s = stream.collect(Collectors.toList()).stream();结果 = result.flatMap(m -> s.map(n -> aggregator.apply(m, n))); - 虽然是一样的?!
  • 好的,我会将您的答案标记为正确,因为它符合我的要求。现在我想知道是否有人提出了不需要集合的解决方案......
  • 它不适用于语句中的收集器,因为您将同一流连接到多个“收集”终端操作,这是不允许的。这是真正的问题。
【解决方案3】:

您可以创建一个方法,该方法返回 List&lt;T&gt; 对象流,并且不聚合它们。算法是一样的:在每一步,将第二个流的元素收集到一个列表中,然后将它们附加到第一个流的元素中。

聚合器在方法之外。

@SuppressWarnings("unchecked")
public static <T> Stream<List<T>> cartesianProduct(Stream<T>... streams) {
    // incorrect incoming data
    if (streams == null) return Stream.empty();
    return Arrays.stream(streams)
            // non-null streams
            .filter(Objects::nonNull)
            // represent each list element as SingletonList<Object>
            .map(stream -> stream.map(Collections::singletonList))
            // summation of pairs of inner lists
            .reduce((stream1, stream2) -> {
                // list of lists from second stream
                List<List<T>> list2 = stream2.collect(Collectors.toList());
                // append to the first stream
                return stream1.flatMap(inner1 -> list2.stream()
                        // combinations of inner lists
                        .map(inner2 -> {
                            List<T> list = new ArrayList<>();
                            list.addAll(inner1);
                            list.addAll(inner2);
                            return list;
                        }));
            }).orElse(Stream.empty());
}
public static void main(String[] args) {
    Stream<String> stream1 = Stream.of("A", "B");
    Stream<String> stream2 = Stream.of("K", "L");
    Stream<String> stream3 = Stream.of("X", "Y");
    @SuppressWarnings("unchecked")
    Stream<List<String>> stream4 = cartesianProduct(stream1, stream2, stream3);
    // output
    stream4.map(list -> String.join("", list)).forEach(System.out::println);
}

String.join 在这种情况下是一种聚合器。

输出:

AKX
AKY
ALX
ALY
BKX
BKY
BLX
BLY

另见:Stream of cartesian product of other streams, each element as a List?

【讨论】:

    猜你喜欢
    • 2015-11-14
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2017-05-22
    • 2020-11-07
    • 2013-12-25
    • 2019-08-11
    相关资源
    最近更新 更多