Azure Databricks管道由于依赖性而失败

发布于 2025-01-31 11:33:29 字数 185 浏览 4 评论 0 原文

我们有一个Databricks管道,大多数时候它成功运行一次每6小时运行一次,但是有时通过投掷以下错误而失败,

ModuleNotFoundError: No module named '<module-name>'

我是Databricks的新手,任何人都可以告诉我如何解决它。

we have a Databricks Pipeline which runs every 6 hours most of the time it runs successfully but sometimes its getting failed by throwing below error

ModuleNotFoundError: No module named '<module-name>'

I am new to Databricks can anyone tell me how to fix it.

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

北方的巷 2025-02-07 11:33:29

一些因库将无法正常工作是基本环境。建立虚拟环境是强烈建议的。

请按照链接在数据砖中创建虚拟环境:

请参考以下链接,以使用databricks连接pyodbc。

https://docs.databricks.com/dabricks.com/dev-tools/dev-tools/dev-tools/dev-tools/pyodbc.htbc.html

Some of the dependent libraries will not be working fine is base environment. It's highly suggestable to create virtual environment.

Follow the link to create virtual environment in Data Bricks: https://learn.microsoft.com/en-us/azure/databricks/runtime/conda

Refer the following link to connect pyodbc with databricks.

https://docs.databricks.com/dev-tools/pyodbc.html

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文