Tachyon和HDFS的问题
现在用tachyon+hdfs的方式做文件系统 一直是操作tachyon，同时hdfs也有相应的反应 但是不太清楚tachyon的工作原理，tachyon是基于内存的，是一段时间…
怎样解析通过Flume写入HDFS中的sequence file
log4j的日志通过flume收集到hdfs中，并在flume里配置了hdfs的sink, 其中fileType为SequenceFile。但不知道hdfs里sequencefile的record, key和value类…
Hadoop的HDFS的java client jar包在哪下载？
Hadoop的HDFS的java客户端编程接口的jar包在哪？我在网上找到如下示例代码： import org.apache.hadoop.fs.FileSystem import org.apache.hadoop.con…
在使用Spark Streaming向HDFS中保存数据时，文件内容会被覆盖掉，怎么解决？
我的Spark Streaming代码如下所示： val lines=FlumeUtils.createStream(ssc,"hdp2.domain",22222,StorageLevel.MEMORY_AND_DISK_SER_2) val words =…
spark集群中每个节点都有一个独立数据库，可以实现分布式统计计算吗？
我将spark搭建在两台机器上，其中一台即是master又是slave，另一台是slave，两台机器上均装有独立的mongodb数据库。我的主程序让它们统计自身数据库…
hadoop下的存储在hdfs中的视频文件怎么播放？
hadoop下的存储在hdfs中的视频文件怎么播放？可以直接拿到视频文件的http路径吗，我现在想实现的是像百度云这样的可以在线播放，但是不知道怎么得到文…
sqoop client java api将mysql的数据导到hdfs
package com.hadoop.recommend import org.apache.sqoop.client.SqoopClient import org.apache.sqoop.model.MDriverConfig import org.apache.sqoop…
Android通过HDFS API 上传和读取文件
Android通过HDFS API 上传和读取文件需要什么jar包引入，然后要添加什么配置文件到项目，配在哪里，然后怎么连接上，如果可以给出核心的连接代码给我…
Yarn的出现到底给MapReduce、Spark等带来了什么？
好多MapReduce On Yarn ， Spark On Yarn 可是没有yarn， MapReduce Spark 不是一样跑 …
tachyon format时候要连hdfs哪个端口？
Formatting Tachyon Master @ localhost Exception in thread "main" java.net.ConnectException: Call From cloudwave0/192.168.0.50 to cloudwave0…
tachyon format时候出错，用hdfs做下层文件系统
Formatting Tachyon Master @ localhost Exception in thread "main" java.io.IOException: Failed on local exception: com.google.protobuf.Invali…
