【发布时间】:2020-11-19 00:45:12
【问题描述】:
我想将初始化脚本(具有所有库依赖项)与数据块中的交互式集群附加在一起。初始化脚本类似于下面的附件,在 databricks 笔记本中运行良好。
我希望这个 shell 脚本在集群启动时运行,但是当我将它配置为集群的初始化脚本时,它会返回一个错误。这是我将初始化脚本附加到集群的方式,
我发现url 讨论了同样的问题,但此处提供的解决方案(将文件的扩展名从 .sh 更改为 .bash)对我不起作用。请帮我解决这个问题。
【问题讨论】:
标签: python bash cluster-computing databricks azure-databricks