【发布时间】：2019-02-22 06:52:51
【问题描述】：
目前我们在 Azure HDInsight 集群（版本：HDI 3.6）中使用 ML pyspark 作业。是否可以在 Azure Databricks 中使用相同的 pyspark 作业而不进行太多更改？
提前致谢！
【问题讨论】：
标签： azure azure-hdinsight azure-databricks
【发布时间】：2019-02-22 06:52:51
【问题描述】：
我会说是的，但要考虑以下几点：
- 确保 HDInsight 群集的 Python 和 Spark 版本与为群集选择的 Databricks runtime 相似或兼容。
- 您是否使用任何外部库？如果是这样import it 到您的工作区并将其附加到集群。
- 您的工作使用哪个数据源？您可能必须将数据源装载到数据块工作区中，例如装载 Blob 存储 (https://docs.databricks.com/spark/latest/data-sources/azure/azure-storage.html#mount-azure-blob-storage-containers-with-dbfs)
希望这些信息对你有帮助
问候，
胡安
【讨论】：