日均2.5个亿查询量的系统架构?

发布于 2022-09-04 09:34:10 字数 308 浏览 16 评论 0

负责的模块 每天要承接2.5个亿(3000QPS)的查询量(根据ID查找hbase数据 业务很简单)

目前是两台128g内存的物理服务器

ehcache单机缓存

数据存在hbase当中

还没有做压力测试

请问:
这种场景下 一般的tomcat能抗住多少QPS
我觉着两台不够 大概需要几台服务器
有什么优化的思路?

-我能想到的是
改用redis分布式缓存
tomcat jvm -gc优化
http和内核配置
代码优化
加机器不知道加几台现在

`

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(4

愁杀 2022-09-11 09:34:10

找个压力测试工具验证一下jmeter才知道。
之前我们做的SNS,一台Tomcat应用的性能指标就是3000TPS
机器是华为R3刀片机,16核的。

同时可以通过XRebel监控一下逻辑执行耗时。

独守阴晴ぅ圆缺 2022-09-11 09:34:10

3k的QPS不算特别高,有缓存的话数据库还好,扛得住。只是tomcat的QPS一般是K级别,是不是可以考虑用其它服务器(比如nginx)来读写cache?这样可以减轻tomcat负载,从而提高整体吞吐量。

水晶透心 2022-09-11 09:34:10

百度自己用C++重构的类似bigtable的存储单机随机读写达到3万qps。hbase虽然相对性能差些,但是至少10000qps应该可以达到所以数据库不是问题。

鉴于你说的机器和资源情况,可以考虑两台机器混部,每台机器上都有hbase和tomcat。另外可以考虑根据tomcat的服务机制和你的逻辑的耗时适当调整线程数。

如果两台机器各方面都比较高配,建议使用一些资源隔离和虚拟化的方案

枕梦 2022-09-11 09:34:10

可以不用tomcat不,换其他的,tomcat有点重

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文