Hadoop存储安全

发布于 11-06 14:02 字数 95 浏览 835 评论 6

请问大家,Hadoop的数据存储方面有容错性质么?之前接触的Eucalyptus中的S3存储是非安全的,想找寻一个相对安全容错性高的存储,谢谢大家(我所谓理解的容错,某硬盘挂掉)

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(6

空城仅有旧梦在2021-11-09 20:32:21

恩,也就是说namenode需要做硬件的raid5或者更高级的存储保证吧,再次感谢

眼眸2021-11-09 20:08:25

谢谢~(≧▽≦)/~啦啦啦

平定天下2021-11-09 17:37:01

不是这个意思了 一般是一个namenode和多个datanode 数据本身是保存在datanode中的,同个文件块可以有多个备份在不同的datanode上,备份和恢复过程一般是后台自动完成的。 但是namenode只有一个,挂了的话,整个系统就废了。这个,网上有解决方案,需要自己做备份。

兮颜2021-11-09 17:18:50

你可以看看这个的第三章前两节,对HDFS的结构有简单的描述 http://wenku.baidu.com/view/d7d57dc24028915f804dc2f5.html

哑剧2021-11-09 12:45:30

哦,如果我的namenode部署到三台计算机,也就是说备份会出现3份 谢谢啦 S3是简单共享 安全几乎没有╮(╯_╰)╭

私藏温柔2021-11-09 12:22:36

HDFS每个文件块默认是3份拷贝。保存在3个不同的datanode上。如果一个出错的话,会用其他的拷贝进行恢复。可以在配置文件或者用FS命令修改文件的拷贝数。

不过namenode的容错性就需要自己做了。

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文