读取hdfs中的某一文件夹的文件为什么不支持通配符（foo/*）呢？
刚刚学习Hadoop get started 遇到了这么一个问题 # 有两个目录 bin/hdfs dfs -ls drwxr-xr-x - zhugw supergroup 0 2018-11-17 17:11 output drwxr-x…
hadoop streaming 运行时 subprocess failed with code 126
在运行hadoop streaming时，报错，异常内容如下: Error: java.lang.RuntimeException: PipeMapRed.waitOutputThreads(): subprocess failed with cod…
hadoop streaming中shuffle过程问题
hadoop streaming map reduce 输入输出疑问 hadoop 中在map和reduce中间会有一个shuffle过程。所以正常来说map输出reduce的输入应该如下: # map…
HDFS Sequence File 存一个大文件，还是存多个小文件？
目前正在使用Sequence File对已有数据进行（BLOCK）压缩。 有两种存储方式 一个大文件，所有记录都保存在这个文件里面 多个小文件，文件大小正好和HD…
how to set concurrence map tasks on hadoop 2.5
when I set： mapred.job.map.capacity mapreduce.job.running.map.limit mapreduce.job.map.capacity they are not work，is there some other conf…
hdfs FSDataOutputStream和FileSystem的问题
FileSystem是否就相当于client？每次FileSystem.create就是新建了一个client？ 关于hdfs文件关闭，当FSDataOutputStream流关闭了，是否就表示这个文…
phoenix查询count与全部的问题
phoenix查询的问题有人遇到过吗 执行全部查询的时候 select * from xxx 能查看到数据 执行count查询的时候 select count(*) from xxx 返回count为0 …
hadoop源码bin目录下找不到start-all.sh来启动hadoop
hadoop源码bin目录下找不到start-all.sh脚本。 说明一下，在hadoop导入进eclipse之前，这个脚本是存在的。 导入后，bin目录的文件被修改了，我需要的…
Android通过HDFS API 上传和读取文件
Android通过HDFS API 上传和读取文件需要什么jar包引入，然后要添加什么配置文件到项目，配在哪里，然后怎么连接上，如果可以给出核心的连接代码给我…
eclipse中阅读hadoop源代码求助
我想在eclipse中查看hadoop的源代码，下载了hadoop-2.4.1-src.tar.gz后，新建工程加载代码后发现source not found，看教程说是要在项目中properties…
hadoop 2.2.0 关于map和reduce的个数的设置
关于hadoop中的map过程，我的理解是每一个map系统会开启一个JVM进程来处理，map之间相互并行，map函数内串行。这样的想法是否正确？ 由于想在hadoop…
hadoop2.2.0如何确定map任务在哪个节点上运行？
我通过将输入文件分为四份使得hadoop程序运行时有四个map,但是我无法确定到底哪个map在哪个节点上运行。Web UI显示如下： 我的集群nodeManager有两个…
