MapReduce

MapReduce

文章 106 浏览 158

MongoDB MapReduce:在映射函数中使用位置运算符 $

我有一个包含如下条目的集合: {"userid": 1, "contents": [ { "tag": "whatever", "value": 100 }, {"tag": "whatever2", "value ": 110 } ] } 我正…

苄①跕圉湢 2024-11-10 15:53:32 3 0

Hive 上的自定义 MapReduce 程序,规则是什么?输入和输出怎么样?

我被困了几天,因为我想根据我对 hive 的查询创建一个自定义的地图缩减程序,在谷歌搜索后我发现没有太多例子,而且我仍然对规则感到困惑。 创建自定…

迟月 2024-11-10 15:44:38 2 0

MapReduce 的输出参数在哪里使用?

这是本教程的代码示例: http://kylebanker.com /blog/2009/12/mongodb-map-reduce-basics/ 他指出“从 MongoDB v1.8 开始,您必须指定输出集合名称”…

放手` 2024-11-10 14:54:31 4 0

在mongodb中查找多维最大值

如果我有这个集合, { "humidity" : 96.5812, "temperature" : 10.5006 } { "humidity" : 97.1184, "temperature" : 10.2808 } { "humidity" : 96.288…

混浊又暗下来 2024-11-10 12:39:47 1 0

映射减少计数示例

我的问题是关于java中的mapreduce编程。 假设我有 WordCount.java 示例,一个标准的 mapreduce 程序。我希望map函数收集一些信息,并返回到reduce函数…

牵你手 2024-11-10 10:15:24 1 0

MapReduce Mongodb Node JS 原生驱动

我正在使用 Map reduce 函数使用 Mongodb 本机驱动程序。基本上我有一个 mediaId 作为键,并且想要计算每个 mediaId 加载和启动的媒体数量。 所以我所…

冷弦 2024-11-10 05:53:38 0 0

PHPillow 中用于 CouchDB 的 Reduce 函数

我正在尝试在 PHPillow 中执行(MapReduce 的)reduce 函数,目前它尚未记录,但我确实需要这样做。有谁有在 PHPillow 中实现 Reduce 函数的示例吗? …

甜妞爱困 2024-11-10 02:17:21 1 0

SpringBatch 中的 MapReduce/聚合操作

是否可以在SpringBatch中进行MapReduce风格的操作? 我的批处理工作有两个步骤。第一步计算平均值。第二步将每个值与平均值进行比较以确定另一个值。 …

无人接听 2024-11-10 00:53:27 4 0

输入格式是否负责在 Hadoop 的 MapReduce 中实现数据局部性?

我试图了解数据局部性,因为它与 Hadoop 的 Map/Reduce 框架相关。特别是我试图了解什么组件处理数据局部性(即它是输入格式?) 雅虎的开发者网络页…

初吻给了烟 2024-11-09 16:50:23 1 0

尝试获取 MongoDB 字段中每个单词的计数是 MapReduce 的工作吗?

我有一个集合,里面有很多正文帖子。例如: posts = { { id: 0, body: "foo bar baz", otherstuff: {...} }, { id: 1, body: "baz bar oof", otherstu…

朱染 2024-11-09 14:44:04 0 0

旅行推销员和 Map/Reduce:放弃通道

这是一个学术问题而不是实际问题。在旅行商问题或任何其他涉及寻找最小优化的问题中……如果使用映射/归约方法,那么采用某种方法将当前最小结果广播…

留一抹残留的笑 2024-11-09 07:53:06 2 0

如何获取 MongoDB 中子数组的最小值/最大值?

因此,我遇到了使用数组标记文档的情况,例如: tags: [ 'Housing' : 10, 'Retail' : 1, 'Stocks' : 25, ] 我只是保存标签本身,但最近添加了数字,因…

归属感 2024-11-09 02:42:49 3 0

MapReduce 在原始函数式语言中的可扩展性如何?

Map-Reduce 编程模型源于映射和化简函数,这些函数早在 Lisp 和Scheme 等函数式语言中就已存在。 我记得在大学(90 年代初)时,我就被告知 Map-Reduc…

绝影如岚 2024-11-08 23:22:32 4 0

在 Google App Engine 中使用 mapreduce 的简单反例

我对 GAE 中 MapReduce 支持的当前状态有些困惑。根据文档http://code.google.com/p/appengine-mapreduce/减少阶段是尚不支持,但在 I/O 2011 会议的…

深陷 2024-11-08 22:54:59 4 0

“合并”在 CouchDB 中查看有用输出的排序规则

在 CouchDB 中执行“连接”时,您可以使用视图排序规则将记录分组在一起。例如,有两种文档类型客户和订单。这样您就可以返回客户,然后返回该客户的…

玩心态 2024-11-08 18:00:20 4 0
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文