DataProc:用户可以创建不同实例类型的工人吗?

发布于 2025-01-24 20:08:17 字数 163 浏览 5 评论 0原文

设想: 主:X1机器类型 工人:X2机器类型,X3机器类型。

对于上述情况:AWS EMR实例机队允许用户创建不同的工作实例类型。从DataProc控制台中,我注意到选项仅适用于N-Worker类型(同一类型的所有工作类型)。 DataProc HDI还支持为Worker创建不同实例类型的选项吗?

scenario:
master: x1 machine type
workers: x2-machine type, x3-machine type.

For the above scenario: AWS EMR instance fleet allows users to create different worker instance types. From dataproc console, I noticed options is for only, N-worker types(all worker types of same type). Does Dataproc HDI also support this option of creating different instance types for worker?

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

帅哥哥的热头脑 2025-01-31 20:08:17

DataPRoc支持2种工人组的类型:(主要)工人和 /a>。但是它们必须具有与Q2 2022相同的机器类型,只有一个标志- Worker-machine-type

请注意,它确实允许二级工人具有不同的磁盘类型,磁盘尺寸,加速器等。请参阅此 doc 有关更多详细信息。

Dataproc supports 2 types of worker group: (primary) workers and secondary workers. But they must have the same machine type as of Q2 2022, there is only one flag --worker-machine-type for it.

Note that it does allow secondary workers to have different disk type, disk size, accelerator, etc. See this doc for more details.

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文