hadoop 之上的列存储?

发布于 2024-10-11 09:09:57 字数 105 浏览 0 评论 0原文

是否有类似于 Vertica 的列存储,构建在 Hadoop 之上。我不是在谈论 HBase,因为它是稀疏矩阵存储,无法获得像 Vertica 这样的东西可以实现的压缩级别?

谢谢

Is there a column store similar to Vertica that is built on top of Hadoop.. I am not talking about HBase as it is sparse matrix store and can not get the level of compression that can be achieved by something like Vertica?

Thanks

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(4

娇俏 2024-10-18 09:09:57

您是否正在寻找类似 RC文件?它是一种内部使用列式存储的文件类型。

Are you looking for something like RCFile? It is a file type that uses a columnar store internally.

知你几分 2024-10-18 09:09:57

RCFile 是一个好的开始。 RCFile 以 PAX 布局存储数据——块内的柱状布局,其大小可能与 HDFS 的块大小一样大。 VLDB 2011 上有一篇论文描述了另一种列式存储格式此处 以及一篇与 RCFile 进行简短比较的博客文章此处

RCFile is a good start. RCFile stores data in a PAX layout -- columnar within blocks that could be as large as HDFS's block size. There is a paper at VLDB 2011 describing another columnar storage format here and a blog post with a short comparison to RCFile here.

坏尐絯℡ 2024-10-18 09:09:57

我没有使用过 Hadoop,但我知道 Vertica 一直在尝试与 Hadoop 集成。

http://www.vertica。 com/the-analytics-platform/native-bi-etl-and-hadoop-mapreduce-integration/

I haven't worked with Hadoop, but I know Vertica has been trying to integrate with Hadoop.

http://www.vertica.com/the-analytics-platform/native-bi-etl-and-hadoop-mapreduce-integration/

嘿哥们儿 2024-10-18 09:09:57

看看Hadapt http://hadapt.com/

这是HadoopDB的商业版本http://db.cs.yale.edu/hadoopdb/hadoopdb.html
耶鲁大学开发。它可以与面向列的数据库(安装在计算机集群的每个节点上)配合使用,同时利用 Hadoop 进行容错执行。

Look on Hadapt http://hadapt.com/

This is a commercial version of HadoopDB http://db.cs.yale.edu/hadoopdb/hadoopdb.html
developed at Yale University. It can work with a column-oriented DB (which is installed on every node of a computer cluster) while leverages Hadoop for fault-tolerant execution.

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文