partition-by

partition-by

文章 0 浏览 2

在写入期间 Spark repartiton、sortWithinParitions 和partitionBy 扰乱了我的排序

我有 scala Spark 代码,可将数据帧写入 csv 文件。代码如下所示 dataframe .select("path", "id", "top_path") .repartition(1, col("top_path")) .s…

甚是思念 2025-01-12 05:13:20 4 0
更多

推荐作者

alipaysp_snBf0MSZIv

文章 0 评论 0

梦断已成空

文章 0 评论 0

瞎闹

文章 0 评论 0

寄意

文章 0 评论 0

似梦非梦

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文