DataProc:用户可以创建不同实例类型的工人吗?
设想: 主:X1机器类型 工人:X2机器类型,X3机器类型。
对于上述情况:AWS EMR实例机队允许用户创建不同的工作实例类型。从DataProc控制台中,我注意到选项仅适用于N-Worker类型(同一类型的所有工作类型)。 DataProc HDI还支持为Worker创建不同实例类型的选项吗?
scenario:
master: x1 machine type
workers: x2-machine type, x3-machine type.
For the above scenario: AWS EMR instance fleet allows users to create different worker instance types. From dataproc console, I noticed options is for only, N-worker types(all worker types of same type). Does Dataproc HDI also support this option of creating different instance types for worker?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(1)
DataPRoc支持2种工人组的类型:(主要)工人和 /a>。但是它们必须具有与Q2 2022相同的机器类型,只有一个标志
- Worker-machine-type
。请注意,它确实允许二级工人具有不同的磁盘类型,磁盘尺寸,加速器等。请参阅此 doc 有关更多详细信息。
Dataproc supports 2 types of worker group: (primary) workers and secondary workers. But they must have the same machine type as of Q2 2022, there is only one flag
--worker-machine-type
for it.Note that it does allow secondary workers to have different disk type, disk size, accelerator, etc. See this doc for more details.