返回介绍

为什么 SkyWalking 体系中没有使用 MQ?

发布于 2023-10-10 23:52:04 字数 777 浏览 0 评论 0 收藏 0

大多数人在第一次接触SkyWalking时会有这样的疑问. 他们认为MQ在性能和支持高吞吐量方面应该更好

SkyWalking基于以下几点原因考虑

MQ是OAP后端通信的好方法还是正确方法?

当人们思考当OAP集群不够强大或者宕机时,这个问题就产生了. 但在回答这个问题之前,我想先问几个问题。

  1. 为什么你认为OAP不够强大?事实并非如此,数据分析的速度赶不上生产者(代理)。那么添加新的部署需求的意义是什么呢?

  2. 也许你会说,有效载荷有时会比平常高。但是,我的问题是,它会高多少?

  3. 如果不足40%,您将为新的MQ集群使用多少资源?将它们移动到新的OAP和ES节点怎么样?

  4. 如果高于40%,比如70%-2倍?然后,我可以说,MQ浪费的资源比节省的资源多。

您的MQ将支持2 -3倍的有效负载,通常花费额外的10%-20%的时间。在这种情况下,

如果有效负载/吞吐量如此之高,OAP集群能够及时处理么。我想说,在OAP集群处理完毕之前可能下一个高峰已经到来。

除了这些分析,因为你花费了这么多的资源所以必须采集100%的数据? 比这更好, 我们可以考虑在后端添加更好的动态跟踪采样机制, 当吞吐量超过阈值时,逐步将采样率激活到100%->10%, 这意味着你可以让OAP和ES比平常强大3倍,只是忽略高峰时的部分数据而已。

MQ度量数据导出器怎么样?

我想说,它已经在那里可用了。导出模块与gRPC默认机制是存在的。为该模块提供新的实现者是很容易的。

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文