spark-notebook

spark-notebook

文章 0 浏览 2

突触笔记本密码在运行时可见

我创建了Synapse笔记本,其中我正在传递诸如密码之类的秘密参数。这些秘密在KeyVault中,作为参数传递给笔记本。理想情况下,我希望开发人员看不到这…

泪眸﹌ 2025-02-14 02:05:44 2 0

Synapse Pipeline Notebook无法从引用笔记本中解析方法

我有一条突触管道,该管道在执行业务作业之前运行笔记本,其中包含单位测试(另一个笔记本)。单元测试笔记本电脑使用 mssparkutils.notebook.run()…

留一抹残留的笑 2025-02-12 07:51:06 0 0

Apache Spark无法识别UTF-16 CSV文件中的列

问题:为什么我在下面代码的最后一行中遇到以下错误,如何解决问题? attributeError:'dataframe'对象没有属性'OrderID' csv文件编码:utf-16 le bom…

零度℉ 2025-02-09 00:54:53 3 0

我可以在火花池突触中运行存储过程吗?

我想知道如何在我在专用SQL池中创建的Spark Pool(Azure Synapse)中运行存储过程。另外,我们可以运行SQL查询以访问笔记本中DDSQL池中的数据。…

最单纯的乌龟 2025-02-08 02:05:06 3 0

为什么在Databricks笔记本中不匹配的作业运行时间和命令执行时间?

我有一个Azure Databricks作业,它是通过API调用通过ADF触发的。我想看看为什么这项工作花了N分钟才能完成任务。当作业执行结果时,作业执行时间说15…

流心雨 2025-02-03 03:39:45 4 0

Azure Spark Notebook 处理大型文本和/或二进制文件

参考运行 Spark Notebook 的 Azure Synapse 管道生成随机错误欲了解更多信息。 我一直在努力让 Azure Synapse Spark 笔记本来处理未压缩的 778MB IIS …

世俗缘 2025-01-14 11:41:35 3 0

运行 Spark Notebook 的 Azure Synapse Pipeline 会生成随机错误

我正在 Azure Synapse Spark 笔记本中处理大约 19,710 个包含 IIS 日志文件的目录。每个目录中有3个IIS日志文件。 Notebook 读取目录中的 3 个文件,…

荆棘i 2025-01-10 20:27:46 3 0

如何将 For-Each 当前项目传递到 Azure Spark Notebook

花了几个小时尝试将 @item() 从 for-each 活动作为字符串传递到 Azure Spark 笔记本中。为了让其他人不必为此苦苦挣扎,我将提供答案。…

烟柳画桥 2025-01-09 10:09:48 5 0

使参数在 Azure .NET C# Spark Notebook 中起作用

我尝试将字符串参数传递到完全用 .NET Spark C# 编写的 Spark NoteBook 中,无论我尝试什么,它都不起作用。最终所做的工作是将 笔记本定义为 PySharp…

晌融 2025-01-09 07:04:29 5 0
更多

推荐作者

十二

文章 0 评论 0

飞烟轻若梦

文章 0 评论 0

OPleyuhuo

文章 0 评论 0

wxb0109

文章 0 评论 0

旧城空念

文章 0 评论 0

-小熊_

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文