【问题标题】:how to move files located in on-premises windows based file share using scala?如何使用 scala 移动位于基于 Windows 的本地文件共享中的文件?
【发布时间】:2018-08-03 11:20:14
【问题描述】:

背景:我正在使用 Azure ADFV2 将数据从文件共享移动到 ADLS,成功移动文件后,我想将文件存档在文件共享位置。

如何连接到本地基于 Windows 的文件共享并使用 scala 将文件从一个文件夹移动到文件共享内的另一个文件夹。我不确定如何建立与文件共享的连接。

【问题讨论】:

  • 信息太少。最好询问您组织中的人员他们是如何做到的?
  • @SarveshKumarSingh - 添加了更多信息
  • 为什么一定要用scala?
  • 我的最后一个活动是 ADF 中的 spark,因此认为我可以在 scala 代码中实现。基于spark活动的成功,我要实现文件。如果 ADF 中还有其他方法也可以。
  • 也许你可以看看这个? docs.microsoft.com/en-us/azure/data-factory/…

标签: scala azure-data-factory azure-data-factory-2 fileshare


【解决方案1】:

您可以使用文件系统链接服务来建立与文件共享的连接。

  1. 在 ADF 上创建自托管集成运行时并将其安装在您的计算机上。

  2. 创建一个文件系统链接服务,对于“Connect via integration runtime”字段,选择您在1中创建的自托管ir。

  3. 按照文档说明配置链接的服务和数据集:https://docs.microsoft.com/en-us/azure/data-factory/connector-file-system

【讨论】:

  • 我从文件共享复制文件没有问题,我想在文件共享中移动文件。 ADF 中没有移动活动。
  • 对不起,我误解了。 Adf 现在不支持删除,但它在路线图中。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2022-01-07
  • 2019-06-28
相关资源
最近更新 更多