【问题标题】:How to use dbutils in spark?如何在火花中使用 dbutils?
【发布时间】:2019-04-02 12:24:21
【问题描述】:

我想通过 DBFS 挂载一个 s3 存储桶,但这些教程都没有说明我需要添加哪些依赖项,以及我需要导入哪些内容才能使其工作。

说,这里https://docs.databricks.com/spark/latest/data-sources/aws/amazon-s3.html 你可以看到到处都有这个“dbutils”对象,但它没有说明我需要添加什么依赖项以及我需要导入什么来访问它。

有人可以帮忙吗?

【问题讨论】:

    标签: apache-spark apache-spark-sql


    【解决方案1】:

    dbutils 是专有的 Databricks 产品。要使用它,您必须为平台付费,而且您可以开箱即用。

    否则没有这样的选择。它不是独立软件包,不能在 Databricks 分析平台之外购买或许可。

    【讨论】:

      猜你喜欢
      • 2017-02-26
      • 2019-04-30
      • 2018-08-09
      • 2020-04-25
      • 1970-01-01
      • 2021-10-23
      • 1970-01-01
      • 2017-01-29
      • 1970-01-01
      相关资源
      最近更新 更多