为什么我们需要 hadoop 来实现超表
我用 C++ 编写了一个爬虫,我正在寻找一个分布式数据存储,我发现了 2 1)数据库 2)hypertable
都是Big table的实现,我刚刚回顾了hypertable..因为它是用c++实现的并且..hbase使用最广泛 我的问题是我们需要hadoop...如果我在hadoop 上运行hypertable 有什么好处吗?
i have written an crawler in c++ and i am looking for an distributed data store i found 2
1) hbase
2) hypertable
both are the implementation of Big table and i just reviewed hypertable.. because it was implemented in c++ and..hbase is most widely used
my question is way we need hadoop...is there is any benifits if i run hypertable on top of hadoop?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(2)
不需要使用 Hadoop。 Hypertable 只需要在分布式文件系统之上运行。因此,您可以在 Hadoop DFS、KosmosFS、GlusterFS、Ceph 以及其他一些(例如 MooseFS 或 Lustre)之间进行选择。
共同的好处由应用程序要求和现有基础设施决定。从故障排除的角度来看,社区(尤其是 Hadoop 的)规模也是一个重要因素。
It's not required to use Hadoop. Hypertable only requires to be ran on top of distributed filesystem. So, you can choose between Hadoop DFS, KosmosFS, GlusterFS, Ceph, and maybe some others (like MooseFS or Lustre).
Common benefits are determined by application requirements and existent infrastructure. From a troubleshooting point of view, community (especially Hadoop's) size is also the great factor.
您还可以查看 cassandra (http://cassandra.apache.org/) 的另一个实现,有点类似于 Big Table。
You can also look into cassandra (http://cassandra.apache.org/) another implementation somewhat similar to Big Table.