在原kafka集群动态增加分区后,发现刚增加的分区和原分区数据量差距太大?

发布于 2022-01-07 01:56:43 字数 404 浏览 953 评论 1

现在遇到了一个kafka集群分区扩容问题,详细情况为:

我现在kafka 集群为5台机器,现在的主题中分区数为8个,但是没有添加新的机器,只是想将现在的分区数改为10个,利用kafka自带的脚本,执行生产迁移计划、执行迁移计划、验证迁移计划,这些步骤都能成功,但是在kafka tools工具里面查看新增加的分区数和原来分区数据总量差距很大,且在消费的时候差距也很大。吞吐量严重下降,有大神吗知道怎么修改吗?

注意:其中的8/9为新增加的分区,0-7为旧分区。

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

泛泛之交 2022-01-07 12:59:13

分区增加后  对应的硬盘设备没有增加  生产吞吐下降是正常的。。。。  ssd可能会好一点

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文