是否可以添加“组合”进入 Amazon Elastic MapReduce 工作流程?

发布于 2024-12-06 17:41:31 字数 136 浏览 8 评论 0原文

我指的是 Hadoop wiki 上提到的合并步骤。我无法在 AWS 文档中找到对此的参考,我想利用此步骤。

I am referring to the Combine step mentioned on the Hadoop wiki. I have been unable to find a reference to it in the AWS documentation, and I'd like to utilize this step.

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

零度℉ 2024-12-13 17:41:31

Combiner 的文档将位于 Apache 文档中,而不是 AWS 文档中。 Amazon Elastic MapReduce 支持 0.18.3 和 0.20.2 版本的 Hadoop 以及自定义补丁。 Apache MR 教程 参考了如何使用组合器函数。调用 Job.setCombinerClass() 设置组合器类。

The documentation for Combiner will be in the Apache documentation and not in the AWS documentation. Amazon Elastic MapReduce supports 0.18.3 and 0.20.2 versions of Hadoop with custom patches. Apache MR Tutorial has reference to how the combiner function should be used. Call the Job.setCombinerClass() to set the combiner class.

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文