AWS Glue 执行程序内存限制显示错误不明确选项:--conf 可能匹配

发布于 2025-01-12 10:28:10 字数 456 浏览 0 评论 0原文

我的胶水作业出现“由于内存不足而失败”

我已浏览链接 AWS Glue 执行程序内存限制

我添加了

  • 键: --conf
  • 值:spark.yarn.executor.memoryOverhead=7g

我有一个环境变量:(key) --dynamodb ,(value)示例表

  • 我收到以下错误“不明确的选项:--conf 可以匹配 --dynamodb”

https:// i.sstatic.net/dkSNC.png

My glue job is getting "Failed due to put of memory"

I have gone through the link AWS Glue executor memory limit

I have added

  • Key: --conf
  • Value: spark.yarn.executor.memoryOverhead=7g

I have one environment variable :(key) --dynamodb , (value) sample-table

  • I got below error "ambiguous option: --conf could match --dynamodb"

https://i.sstatic.net/dkSNC.png

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文