Apache Kafka

Apache Kafka

文章 164 浏览 73

spring-boot整合kafka一直报错 Unknown error fetching data for topic-partition TPC_NOTICE_FINISH-2

spring.kafka.consumer.bootstrap-servers=10.20.53.90:8092 spring.kafka.consumer.group-id=GRP_TO_SH spring.kafka.consumer.enable-auto-commit=t…

梦年海沫深 2022-05-06 04:17:57 896 0

需要给kafka,xxl-job,rabbitmq单独出一个服务吗?

最近再纠结要不要给kafka单独出一个服务A,其它服务调用服务A然后服务A和kafka连接。xxl-job,rabbitmq同理。 如果需要单独出一个服务,这样做的好处和…

一直在等你来 2022-05-04 01:12:27 839 0

kafka可视化工具为啥要连接zookeeper

最近工程需要做一个kafka的可视化工具,(类似于mysql的navicat一样)。查阅了相关资料,包括kafka Tool、kafka monitor等,发现这些工具都是先连接zook…

遥远的绿洲 2022-05-02 03:07:08 717 0

oracle goldengate+kafka分区问题

ogg到kafka数据同步的时候涉及分区问题,我不想使用ogg+kafka默认的分区规则,想自己实现这分区规则,要自己实现就必须完成黄色框部分的自定义,本人…

甜扑 2022-03-08 03:46:28 796 0

Missing required configuration "offset.storage.file.filename" ??这整个啥子好勒?

.kafka.common.config.ConfigException: Missing required configuration "offset.storage.file.filename" which has no default value.         at o…

心舞飞扬 2022-03-06 02:45:25 734 0

bin/kafka-server-start.sh config/server.properties 启动报错了,,

bin/kafka-server-start.sh config/server.properties      bin/kafka-server-start.sh config/server.properties [2021-03-24 13:54:06,793] INFO Re…

泛滥成性 2022-03-05 04:19:28 775 0

MQ处理高并发能支撑多大的量?

最近碰到一个并发问题,打算用mq做异步处理,然后有一个疑问,当你的系统有10W并发的时候,使用activveMQ能支持这么大的并发吗?我找了一些资料,发现…

沦落红尘 2022-03-04 18:36:59 812 0

kafka连接zookeeper超时。zookeeper是自己搭建的!!但是无限报超时的错误。

下面是主节点和从节点的zookeeper状态: 但是 kafka报错: 这是什么情况, brokerid  和myid 两个都没有错。防火墙也关了 ,服务器时间都是统一的。真…

简单气质女生网名 2022-01-07 22:34:09 773 0

kafka(版本 0.10)已消费过的数据重复消费,而且是3天前的,zk的log未发现异常

kafka(版本 0.10)已消费过的数据重复消费,而且是3天前的,zk的log未发现异常 三台机器分布式消费,下面是消费端配置          props.put("auto.commi…

泪冰清 2022-01-07 18:21:37 953 0

kafka集群启动后,每隔10分钟就跳出一条日志,很影响操作

kafka集群启动后,每隔10分钟就跳出一条日志,很影响操作,求教如何关闭日志打印 [2019-03-19 12:56:48,635] INFO [Group Metadata Manager on Broker…

毁梦 2022-01-07 11:17:26 846 0

关于kafka占用centos7 存储空间

大佬们,今天重启kafka时候,发现虚拟硬盘被占满了,怎么把这个空间清理,或者怎么设置自动清理策略!…

虐人心 2022-01-07 07:56:48 846 0

在原kafka集群动态增加分区后,发现刚增加的分区和原分区数据量差距太大?

现在遇到了一个kafka集群分区扩容问题,详细情况为: 我现在kafka 集群为5台机器,现在的主题中分区数为8个,但是没有添加新的机器,只是想将现在的分…

毁梦 2022-01-07 01:56:43 963 0

希望有大佬帮我讲解下kafka里的分区,备份,消费者读取数据,希望通俗点谢谢

比如kafka配置的是两个分区,三个备份,一个主题,broker个数为三,那么我以下说的对吗?三个备份的话,每个broker下都有一个主题,同时主题里都有两…

自此以后,行同陌路 2022-01-06 21:53:44 754 0

Kafka 与 k8s/docker, 应用是共享还是独占??

想问下大家部署的kafka集群是共享集群,还是独占集群。 是一个应用,部署一套Kafka集群+k8s。 还是共享一个Kafka集群,上面通过不同的topics来区分应…

狼亦尘 2022-01-06 09:41:18 764 0

flink 并发读取kafka数据问题

各位,小弟请教个问题: 你好,想跟你请教个问题: 各位好:刚开始学习flink,有个问题请教:  我搭建了有5个节点的flink集群(standalone 模式),启…

岁吢 2022-01-06 07:06:55 875 0
更多

推荐作者

胡图图

文章 0 评论 0

zt006

文章 0 评论 0

z祗昰~

文章 0 评论 0

冰葑

文章 0 评论 0

野の

文章 0 评论 0

天空

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文