MapReduce

MapReduce

文章 106 浏览 158

CouchDB“加入”两个文件

我有两个看起来有点像这样的文档: Doc { _id: AAA, creator_id: ..., data: ... } DataKey { _id: ..., credits_left: 500, times_used: 0, data_id:…

唐婉 2024-11-16 00:05:27 0 0

HBase:如何使用 Map-Reduce 删除行

我想知道如何使用 Map-Reduce 删除 HBase 中的特定行?…

街角迷惘 2024-11-15 16:45:40 0 0

Hadoop 中的 JoGL? Hadoop 用于图形处理?

阅读此和这篇论文,我决定要为大型应用实现分布式体渲染设置MapReduce 上的数据集作为我的本科论文工作。 Hadoop 是一个合理的选择吗? Java 是否会扼…

忘羡 2024-11-15 15:58:51 2 0

MongoDB Map/Reduce 数组聚合问题

我有一个 MongoDB 集合,其文档使用多个嵌套级别,我想从中提取从其字段的子集编译的多维数组。我现在有一个适合我的解决方案,但我想更好地理解“幂…

弥繁 2024-11-14 16:38:48 5 0

如何使用新的 Hadoop API 来使用 MultipleTextOutputFormat?

我想编写多个输出文件。 如何使用 Job 而不是 JobConf 来执行此操作?…

一杆小烟枪 2024-11-14 15:19:09 1 0

如何在 GAE Python 上从 cron 启动 MapReduce 作业

我在mapreduce.yaml中定义了mapreduce作业: mapreduce: - name: JobName mapper: input_reader: google.appengine.ext.mapreduce.input_readers.Data…

哎呦我呸! 2024-11-14 06:39:00 2 0

windows下hadoop启动tasktracker时出现问题

我正在尝试在Windows下使用hadoop,当我想启动tasktracker时遇到问题。例如: $bin/start-all.sh 那么日志中写道: 2011-06-08 16:32:18,157 ERROR or…

待天淡蓝洁白时 2024-11-14 04:11:27 1 0

Hadoop全分布式模式

我是 Hadoop 的新手。我已经成功开发了一个简单的 Map/Reduce 应用程序,该应用程序在“伪分布式模式”下运行良好。我想在“完全分布式模式”下测试它…

玩套路吗 2024-11-14 04:04:58 0 0

如何在mongodb中进行不同和分组?

如何进行 mysql 查询 SELECT COUNT(DISTINCT ip), COUNT(DISTINCT area) FROM Visit_logs GROUP BY t_hour 在 mongodb 中没有多重 MapReduce?…

指尖上得阳光 2024-11-13 07:05:07 1 0

在reduce()方法中key的输入顺序是怎样的

我有一个简单的用例。在我的输入文件中,我只需要计算单词总数的百分比分布。例如,word1 出现 10 次,word2 出现 5 次等,单词总数为 100,那么我只…

羁绊已千年 2024-11-12 05:47:00 3 0

MongoDB MapReduce:在映射函数中使用位置运算符 $

我有一个包含如下条目的集合: {"userid": 1, "contents": [ { "tag": "whatever", "value": 100 }, {"tag": "whatever2", "value ": 110 } ] } 我正…

苄①跕圉湢 2024-11-10 15:53:32 2 0

Hive 上的自定义 MapReduce 程序,规则是什么?输入和输出怎么样?

我被困了几天,因为我想根据我对 hive 的查询创建一个自定义的地图缩减程序,在谷歌搜索后我发现没有太多例子,而且我仍然对规则感到困惑。 创建自定…

迟月 2024-11-10 15:44:38 2 0

MapReduce 的输出参数在哪里使用?

这是本教程的代码示例: http://kylebanker.com /blog/2009/12/mongodb-map-reduce-basics/ 他指出“从 MongoDB v1.8 开始,您必须指定输出集合名称”…

放手` 2024-11-10 14:54:31 3 0

在mongodb中查找多维最大值

如果我有这个集合, { "humidity" : 96.5812, "temperature" : 10.5006 } { "humidity" : 97.1184, "temperature" : 10.2808 } { "humidity" : 96.288…

混浊又暗下来 2024-11-10 12:39:47 1 0

映射减少计数示例

我的问题是关于java中的mapreduce编程。 假设我有 WordCount.java 示例,一个标准的 mapreduce 程序。我希望map函数收集一些信息,并返回到reduce函数…

牵你手 2024-11-10 10:15:24 0 0
更多

推荐作者

胡图图

文章 0 评论 0

zt006

文章 0 评论 0

z祗昰~

文章 0 评论 0

冰葑

文章 0 评论 0

野の

文章 0 评论 0

天空

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文