【问题标题】:Azure Synapse development (code writing) best practiceAzure Synapse 开发(代码编写)最佳实践
【发布时间】:2022-01-19 17:13:14
【问题描述】:

我们的团队开始使用 Azure Synapse 进行数据分析,并且我们已经看到了集成的笔记本和 sql。然而,这些都是非常小的,可能是一个很好的起点,但很快我们就会想把工作转移到像 VSCode 或 PyCharm 这样的 IDE...

关于如何或哪些 IDE 与我的 Azure Synapse 代码集成的任何最佳实践?我可以从我的本地 IDE 到 synapse 帐户运行 sql 或笔记本的其中任何一个?

如果关于在 Synapse 中开发的任何最佳实践,关于如何在环境中触发之前编写和测试我的工作?

【问题讨论】:

    标签: python azure azure-synapse


    【解决方案1】:

    首先在 Visual Studio 代码中安装 spark 和 hive 工具。然后我们可以了解如何将作业提交到 Spark 和 Hive 工具。

    Spark 和 hive 工具可以安装在 Visual Studio 支持的平台上。

    需要以下项目才能完成将笔记本从本地 IDE 移动到 synapse 帐户所涉及的步骤。

    无服务器 apache 火花池

    Visual Studio 代码

    Visual Studio Code 的 Pyspark 交互环境

    为了处理或将 sql / notebook 从本地 IDE 移动到 synapse 帐户所涉及的步骤。

    因此,在满足上述先决条件后,您可以按照以下步骤安装 Spark 和 Hive Tools for Visual Studio Code:

    1. 打开 Visual Studio 代码。
    2. 从菜单栏中,导航至查看 > 扩展。
    3. 在搜索框中,输入 Spark & Hive。
    4. 从搜索结果中选择 Spark 和 Hive 工具,然后选择安装。 5.必要时选择重新加载。

    请点击以下链接了解更多详情。

    https://docs.microsoft.com/en-us/azure/synapse-analytics/spark/vscode-tool-synapse

    【讨论】:

      猜你喜欢
      • 2010-10-25
      • 2010-11-11
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2014-07-31
      • 1970-01-01
      相关资源
      最近更新 更多