图片等小文件服务的选择

发布于 2021-11-24 13:39:55 字数 224 浏览 756 评论 18

@红薯 你好,想跟你请教个问题:现在我们的网站需要分布式文件存储,主要用来存储大量图片、小文件等,选择什么存储服务比较好?FastDFS、TFS,你们用的是什么服务,业界主流一般用什么服务?(自己百度、google了,没找到答案),求教,十分感谢!

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(18

因为看清所以看轻 2021-12-01 02:00:29

嗯 研究研究 十分感谢

想挽留 2021-12-01 02:00:28

推荐淘宝TFS,专门用于海量小图片存储:

高可用(每个图片默认保存三份)

无缝扩容(可随时增加机器不影响旧的文件存储)

低成本(普通PC server即可,不必要使用磁盘阵列)

网名女生简单气质 2021-12-01 02:00:27

有没有用过别的存储服务?有没有对比啥的?性能,高可用性等如何,求指教

归属感 2021-12-01 02:00:26

回复
fastdfs还可以吧,我们现在就用的这个。没有什么小众大众的,适合自己的就是好的。最初是准备上hdfs的,可是,种种考虑,容灾、运维、资金等,最后选择了fastdfs。就是一个存储,简单明了,后期还好扩展。

柳絮泡泡 2021-12-01 02:00:26

回复
嗯 十分感谢 我前期用了fastdfs 感觉还好 不过只是开发环境使用 正式环境没上 也有一些缺点 小众、图片重命名等 那我们这种选择什么比较好点?不知道业界主流(sina weibo、twitter)是怎么做的?

断爱 2021-12-01 02:00:25

回复
嗯 HDFS显然不合适 再研究研究

自此以后,行同陌路 2021-12-01 02:00:23

大哥 你怎么老是怀疑我数据量的大小呢 我们是交通类内网应用 图片基本来自城市道路上过车抓拍图片 比如路口抓拍过车 闯红灯 卡口过车图片等 1秒200张上传 高峰时期可能更多 一点也不夸张 咱不纠结这个了好不好 有没有啥解决方案 求指教

柳若烟 2021-12-01 02:00:23

mogilefs, mogodb都可以,目前使用mogilefs存储了10T左右的图片

裸钻 2021-12-01 02:00:22

每秒200张? 平均每秒200次PV的网站也就那么些?

实际情况下,平均每天有多少张图片?1000万以上吗?还是内部的应用

facebook峰值,也不过50万张。

晚风撩人 2021-12-01 02:00:21

我们属于内网应用 而且这些图片涉及个人隐私 不能放到互联网上

清晨说ぺ晚安 2021-12-01 02:00:16

又拍云

奈何桥上唱咆哮 2021-12-01 01:59:41

嗯 但是感觉太小众 淘宝开源之前 业界都是咋搞的呢

奢华的一滴泪 2021-12-01 01:58:42

淘宝不是有开源的么,符合你的要求,专门处理淘宝网的图片

简单气质女生网名 2021-12-01 01:55:11

我们还没用这类产品

后知后觉 2021-12-01 01:45:25

@北京翰索
@月影又无痕 文件主要是图片 大小500K左右 每秒200张左右增长量 使用分布式存储不是为了装屁 是为了实现服务的高可用性,在线、线性扩容等 请各位大牛指点一二

南汐寒笙箫 2021-12-01 01:23:31

@北京翰索
@月影又无痕 文件主要是图片 大小500K左右 每秒200张左右增长量 使用分布式存储不是为了装屁 是为了实现服务的高可用性,在线、线性扩容等 请各位大牛指点一二

睫毛上残留的泪 2021-11-30 22:33:48

文件数量多大?每天的增长量多大?

断爱 2021-11-30 01:57:40

我们还没用这类产品

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文