azure-data-lake

azure-data-lake

文章 0 浏览 2

Azure Python SDK-验证到斑点存储

我想使用Python SDK操纵(删除)用ADL(容器)中的文件和文件夹来操纵(删除)。我有2个问题: 用于此目的的数百个Azure SDK中的哪个? 如何使用AAD代…

抹茶夏天i‖ 2025-01-26 01:26:37 3 0

如何使用Azure Data Factory将文件从网络文件文件夹(远程服务器)传输到Azure Data Lake

是否可以使用Azure Data Factory将文件从远程文件服务器传输到Azure Data Lake。 根据我的知识,自托管IR会很有帮助,但我不确定在哪里配置IR机器。 …

情域 2025-01-24 20:17:09 2 0

Azure Data Factory-按日期的上升顺序从ADL复制到我的数据库(无效)

我正在尝试使用数据工厂管道将过去6个月的数据从ADL复制到我的Azure SQL DB。 当我在以下源过滤器中输入开始时间和结束时间时,它是从当前日期复制数…

我ぃ本無心為│何有愛 2025-01-23 22:25:41 3 0

Blob vs adls gen2 ||可以通过ADLS2完成的事情,但无法通过Blob存储

我是Azure世界的新手。我正在浏览Blob存储和ADLS2。我观察到,除了空间限制和赫里层命名空间之外,ADLS2可以做的一切,也可以通过Blob完成。 但是人们…

不语却知心 2025-01-23 09:28:32 4 0

如何将数据纳克中多个子文件夹的数据加载到Azure Databricks中的数据框架

我很少有Azure DataLake中多个子文件夹中存在的CSV文件。我想将这些文件中存在的所有数据加载到Azure Databricks中的DataFrame中。在下面给出了数据链…

花桑 2025-01-22 09:16:35 2 0

Azure Blob存储 - 如何读取源字符串:wasbs://training@dbrainsouthcentralus.blob.core.windows.net

我正在为Azure数据课程做一个实验室,并且在Azure Databricks中有一些代码可以运行。 我注意到它似乎是从以下位置安装的: wasbs:// [电子邮件&nbsp…

一个人的旅程 2025-01-21 00:34:51 3 0

如何使用 Azure 服务进行直播

问题:使用OpenCV我一直在捕获帧并执行某种操纵。使用该操纵的框架,我正在尝试使用Azure服务进行实时流媒体。 我浏览了Microsoft文档,但我没有找到…

南…巷孤猫 2025-01-20 22:20:07 4 0

Synapse CopyData工具将DateTime更改为INT96

因此,我通过查询从数据库中提取项目,并将该数据放入数据湖中。一切都很好,预览在源选项卡上显示得非常好。然而,在“映射”选项卡上,每当我点击“…

月亮是我掰弯的 2025-01-19 10:13:06 3 0

是否可以设置自动执行和下载 Databricks 脚本?

我在 Databrick 中开发了一些表,它们从我们的 Google 查询和 Azure 数据湖数据中提取数据。它们用于 Excel 仪表板和 SQL 表。但这取决于我每天或每周…

满栀 2025-01-18 08:53:28 1 0

U-SQL FROM 参数

我想知道是否有人可以帮助我理解下面的代码的含义以及使用它的目的是什么。 DECLARE @INPUT_BatchID string = "9035"; DECLARE @BatchID int? = (int?…

浅沫记忆 2025-01-18 03:40:04 1 0

如何在 Azure Delta Lake 上创建外部表(类似于 Hive)

如何在 Azure 数据湖存储上创建外部增量表?我目前正在开展一个迁移项目(从 Pyspark/Hadoop 到 Azure)。我找不到太多有关在 Azure Delta take 中创…

最冷一天 2025-01-17 22:21:24 2 0

通过数据流中的Azure数据工厂的数据压缩

我们有一个Azure数据工厂管道,该管道执行一个简单的数据流,该数据流从 cosmosdb 中获取数据,并在数据湖中汇集。作为目标优化逻辑,我们将分区类型…

似最初 2025-01-17 16:15:11 2 0

如何在 Power BI 桌面中仅加载选定文件

Power BI Desktop 支持从 ADLS 加载单个 parquet 文件, 现在,我们的进程会将多个 parquet 文件转储到一个文件夹中。该文件夹将包含包含其他格式(如…

赠我空喜 2025-01-16 14:23:35 2 0

Azure Data Lake Gen1:在`concurrentappend`之后,后续读取文件返回不同的内容

我们有一个 Azure Data Lake Storage Gen1 实例和一个将传入数据附加到文件中的系统。 我们想向另一个团队保证,在午夜,当天结束的文件将变得不可变…

守望孤独 2025-01-14 18:35:36 3 0

如何使用 Spring Batch 将数据读取/加载到 Azure DataBricks 或 Azure DataLake 中?

我希望使用 Spring Batch 从 csv/xml/Postgres DB 读取并写入 Azure DataLake 或 DataBricks。我还没有看到任何 API 可以做到这一点。有人知道我们如…

何其悲哀 2025-01-11 17:02:14 3 0
更多

推荐作者

alipaysp_snBf0MSZIv

文章 0 评论 0

梦断已成空

文章 0 评论 0

瞎闹

文章 0 评论 0

寄意

文章 0 评论 0

似梦非梦

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文