Kafka0.10.0.0 多个消费者如何配置实现
现在我想让多台机器同时运行消费者端服务,同时取到数据,并且取到的是相互不重复的数据,现在只能其中一台获取到数据。有那些大神指导如何解决吗。Kafka版本0.10.0.0
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
现在我想让多台机器同时运行消费者端服务,同时取到数据,并且取到的是相互不重复的数据,现在只能其中一台获取到数据。有那些大神指导如何解决吗。Kafka版本0.10.0.0
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
接受
或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
发布评论
评论(6)
也就是说,有多少个服务就配置多少个分区,然后配置groupid是一样的。是这样吗?
已解决。原因是我第一次创建topic的时候,services.properties里的分区是1。改成想要的分区数后,把topic删除,重新建,就OK了
每个consumer 对应一个groupid 即可
加到同一个groupID即可,如果有多个partition,你甚至可以控制不同consumer消费不同的partition提高性能。
更多使用方法,请参考官方文档,你的问题在官方文档都有解答
每个topic设置partition,有几个partition就对应几个消费者,groupId要一致,好像是这样
你这是想要使用kafka的队列模式,很久没用了,记得只需要将所有消费者机器的groupId(应该是这个)设置成一样的就行了