【问题标题】:delete a file through sparkr通过 sparkr 删除文件
【发布时间】:2017-04-28 17:05:05
【问题描述】:

我想使用 SparkR 删除 wasb 中的一个文件,我通过参考以下网站获得了“取消链接”命令

https://github.com/apache/spark/blob/master/examples/src/main/r/ml/ml.R

http://spark.apache.org/docs/latest/sparkr.html

命令正在执行而没有抛出任何错误,但文件没有被删除。我也检查了权限,但它不起作用。如果有人能用例子解释我会很棒

【问题讨论】:

  • 您好,您能详细说明一下吗?你说的删除是什么意思?它是从工作区还是某个外部位置移除?
  • 该文件存在于 azure spark cluster 的 wasb 存储中。我想删除整个文件。

标签: r azure-blob-storage sparkr


【解决方案1】:

根据我的理解,我认为您想使用 SparkR 或 R 删除 HDInsight HDFS 上的文件。unlink 方法只是在本地文件系统上删除文件或目录的方法,而不是使用 @987654325 在 HDInsight HDFS 上删除文件或目录的方法@。 SparkR 没有任何 API 可以做到这一点。一个变通的方法是你可以尝试使用第三方R包rhdfs通过hdfs.rm方法来做,简单的代码是here。希望对您有所帮助。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2018-01-11
    • 2015-06-19
    • 2021-10-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多