MapReduce

MapReduce

文章 106 浏览 158

Lua 有 MapReduce 库吗?

是否有Lua的MapReduce库? (我显然找不到)…

旧伤还要旧人安 2024-11-08 16:57:56 2 0

映射/减少 Couchbase 和 Couchbase 之间的差异云蚂蚁

我一直在使用 Couchbase Server,现在只是尝试将本地数据库复制到 Cloudant,但是我的 map/reduce 函数对使用其关联项目构建一组唯一标签时得到了相互…

失与倦" 2024-11-08 15:02:24 5 0

cygwin hadoop 映射减少问题

我在获取 map/reduce 示例在 cygwin 上工作时遇到问题: http://www.michael-noll.com/tutorials/writing-an-hadoop-mapreduce-program-in-python/ 在…

葬花如无物 2024-11-08 13:36:20 2 0

Hadoop wordcount 无法运行 - 需要解码 hadoop 错误消息的帮助

我需要一些帮助来找出我的工作失败的原因。我建了一个单 节点集群只是为了尝试一下。我按照这里的示例。 一切似乎都工作正常。我格式化了 namenode,…

软糖 2024-11-07 20:31:21 4 0

Hadoop mysql 限制减速器

我正在使用 hadoop 更新 mysql 数据库中的一些记录... 我看到的问题是,在某些情况下,会为同一键集启动多个减速器。 我见过最多 2 个减速器在不同的…

锦欢 2024-11-07 19:42:47 1 0

MapReduce编程

我已经在java上完成了这段代码,它收集有关照片的各种信息并将结果提取到文本文件中。 我想将此程序转换为与 MapReduce 模型一起运行。 我是 MapReduc…

拒绝两难 2024-11-07 19:28:33 1 0

如何在 Haoop v 0.21 中调用 Partitioner

在我的应用程序中,我想根据键创建尽可能多的减速器作业。现在,我当前的实现将所有键和值写入单个(reducer)输出文件中。所以为了解决这个问题,我…

金橙橙 2024-11-07 19:28:26 0 0

Hadoop 管道和新的 mapred 包

是否有任何工作正在进行将 Hadoop 管道从 MapRed 移植到 MapReduce 包? 谢谢, 梅格…

风向决定发型 2024-11-07 18:49:06 3 0

与 MongoDB MapReduce 的连接操作

我之前一直使用MapReduce来执行经典的MR操作,相当于SQL中的GROUP BY。 我想知道在概念上是否可以使用 MapReduce 执行 JOIN 操作。知道如何实施吗?使…

北方。的韩爷 2024-11-07 15:37:59 1 0

使用 MultipleOutputs 写入 MapReduce 中的 HBase

我目前有一个 MapReduce 作业,它使用 MultipleOutputs 将数据发送到多个 HDFS 位置。完成后,我使用 HBase 客户端调用(在 MR 之外)将一些相同的元…

冷…雨湿花 2024-11-07 12:54:10 5 0

CouchDB 减少 Futon 中的复选框

我在 CouchDB 中创建了一个小型测试数据库,并在 Futon 中创建了一个临时视图。我编写了映射器和减速器。映射器可以工作,但减速器的复选框永远不会显…

萝莉病 2024-11-07 10:12:32 3 0

如何限制 AppEngine 上的 appengine-mapreduce?

http://code.google.com/p/appengine-mapreduce/ 提到它可以控制执行速度,但我不知道如何控制。为映射器作业创建一个任务队列并从那里控制速度是有意…

婴鹅 2024-11-07 09:42:16 3 0

如何使用计算值批量更新MongoDB服务器上的文档?

我有一些东西的集合,每个东西都有一些用户评论,每个评论都有一个数字(1-5)评级。我想定期运行一个批处理作业,该作业将根据每个“事物”的用户评…

栖竹 2024-11-07 05:27:34 1 0

通过 boto 获取 Amazon Elastic MapReduce 作业流程中已完成的步骤数

为了避免每次提交作业时设置实例的开销,我使用在每次作业完成后始终处于等待模式的作业流。但是,根据此页面,“最多 256 个步骤每个作业流程中都允…

明明#如月 2024-11-06 11:05:40 5 0

使用 Hadoop 处理大量小文件

我正在使用 Hadoop 示例程序 WordCount 来处理大量小文件/网页(约 2-3 kB)。由于这与 hadoop 文件的最佳文件大小相差甚远,因此程序非常慢。我想这…

◇流星雨 2024-11-05 15:54:22 4 0
更多

推荐作者

隔纱相望

文章 0 评论 0

昵称有卵用

文章 0 评论 0

梨涡

文章 0 评论 0

蓝咒

文章 0 评论 0

白芷

文章 0 评论 0

樱娆

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文