The init script works fine in databricks notebook but fails when attached to cluster(初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败)
本文介绍了初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
我希望将init脚本(它具有所有库依赖项)与Databricks中的交互式集群相关联。初始化脚本看起来像下面的附件,在Databricks笔记本中运行得很好。 我希望这个外壳脚本在集群启动时运行,但当我将其配置为集群的init脚本时,它返回一个错误。下面是我将init脚本附加到我的集群的方式, 错误如下所示, 我发现url正在讨论相同的问题,但这里提供的解决方案(将文件扩展名从.sh更改为.bash)对我不起作用。请帮助我解决此问题。
推荐答案
请务必删除多余的(
"
)才能成功安装初始化脚本。
根据我的复制:我使用了与上面相同的代码。
结果:集群终止原因:初始化脚本失败
删除多余引号后("
)。
结果:Init_Script已成功安装。
这篇关于初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持编程学习网!
沃梦达教程
本文标题为:初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败


基础教程推荐
猜你喜欢
- Python 的 List 是如何实现的? 2022-01-01
- 如何在Python中绘制多元函数? 2022-01-01
- 合并具有多索引的两个数据帧 2022-01-01
- 使 Python 脚本在 Windows 上运行而不指定“.py";延期 2022-01-01
- 哪些 Python 包提供独立的事件系统? 2022-01-01
- 将 YAML 文件转换为 python dict 2022-01-01
- 使用 Google App Engine (Python) 将文件上传到 Google Cloud Storage 2022-01-01
- 使用Python匹配Stata加权xtil命令的确定方法? 2022-01-01
- 如何在 Python 中检测文件是否为二进制(非文本)文 2022-01-01
- 症状类型错误:无法确定关系的真值 2022-01-01