【问题标题】:How to save rdd action in textfile? Scala/Spark如何在文本文件中保存 rdd 操作?斯卡拉/火花
【发布时间】:2017-10-15 16:18:10
【问题描述】:

我有一个 rdd 字符串,如何在文本文件上存储 Rdd 操作?或者如何通过控制台、驱动程序查看?

【问题讨论】:

    标签: scala apache-spark bigdata


    【解决方案1】:
    yourRDD.saveAsTextFile("path")
    

    .saveAsTextFile() 方法将数据写入简单的文本文件,其中每个 RDD 元素调用 .toString() 方法,每行写入一个元素。输出的文件数等于正在保存的RDD的分区数。

    【讨论】:

      猜你喜欢
      • 2020-10-21
      • 2020-11-05
      • 1970-01-01
      • 2016-04-27
      • 2017-08-22
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2018-12-11
      相关资源
      最近更新 更多