Apache Kafka

Apache Kafka

文章 164 浏览 71

spring-boot整合kafka一直报错 Unknown error fetching data for topic-partition TPC_NOTICE_FINISH-2

spring.kafka.consumer.bootstrap-servers=10.20.53.90:8092 spring.kafka.consumer.group-id=GRP_TO_SH spring.kafka.consumer.enable-auto-commit=t…

梦年海沫深 2022-05-06 04:17:57 890 0

需要给kafka,xxl-job,rabbitmq单独出一个服务吗?

最近再纠结要不要给kafka单独出一个服务A,其它服务调用服务A然后服务A和kafka连接。xxl-job,rabbitmq同理。 如果需要单独出一个服务,这样做的好处和…

一直在等你来 2022-05-04 01:12:27 830 0

kafka可视化工具为啥要连接zookeeper

最近工程需要做一个kafka的可视化工具,(类似于mysql的navicat一样)。查阅了相关资料,包括kafka Tool、kafka monitor等,发现这些工具都是先连接zook…

遥远的绿洲 2022-05-02 03:07:08 710 0

oracle goldengate+kafka分区问题

ogg到kafka数据同步的时候涉及分区问题,我不想使用ogg+kafka默认的分区规则,想自己实现这分区规则,要自己实现就必须完成黄色框部分的自定义,本人…

甜扑 2022-03-08 03:46:28 789 0

Missing required configuration "offset.storage.file.filename" ??这整个啥子好勒?

.kafka.common.config.ConfigException: Missing required configuration "offset.storage.file.filename" which has no default value. &nbsp &nbsp …

心舞飞扬 2022-03-06 02:45:25 727 0

bin/kafka-server-start.sh config/server.properties 启动报错了,,

bin/kafka-server-start.sh config/server.properties &nbsp &nbsp &nbspbin/kafka-server-start.sh config/server.properties [2021-03-24 13:54:06,…

泛滥成性 2022-03-05 04:19:28 768 0

MQ处理高并发能支撑多大的量?

最近碰到一个并发问题,打算用mq做异步处理,然后有一个疑问,当你的系统有10W并发的时候,使用activveMQ能支持这么大的并发吗?我找了一些资料,发现…

沦落红尘 2022-03-04 18:36:59 800 0

kafka连接zookeeper超时。zookeeper是自己搭建的!!但是无限报超时的错误。

下面是主节点和从节点的zookeeper状态: 但是 kafka报错: 这是什么情况, brokerid&nbsp 和myid 两个都没有错。防火墙也关了 ,服务器时间都是统一的…

简单气质女生网名 2022-01-07 22:34:09 764 0

kafka(版本 0.10)已消费过的数据重复消费,而且是3天前的,zk的log未发现异常

kafka(版本 0.10)已消费过的数据重复消费,而且是3天前的,zk的log未发现异常 三台机器分布式消费,下面是消费端配置 &nbsp&nbsp &nbsp &nbsp &nbsp p…

泪冰清 2022-01-07 18:21:37 945 0

kafka集群启动后,每隔10分钟就跳出一条日志,很影响操作

kafka集群启动后,每隔10分钟就跳出一条日志,很影响操作,求教如何关闭日志打印 [2019-03-19 12:56:48,635] INFO [Group Metadata Manager on Broker…

毁梦 2022-01-07 11:17:26 838 0

关于kafka占用centos7 存储空间

大佬们,今天重启kafka时候,发现虚拟硬盘被占满了,怎么把这个空间清理,或者怎么设置自动清理策略!…

虐人心 2022-01-07 07:56:48 836 0

在原kafka集群动态增加分区后,发现刚增加的分区和原分区数据量差距太大?

现在遇到了一个kafka集群分区扩容问题,详细情况为: 我现在kafka 集群为5台机器,现在的主题中分区数为8个,但是没有添加新的机器,只是想将现在的分…

毁梦 2022-01-07 01:56:43 953 0

希望有大佬帮我讲解下kafka里的分区,备份,消费者读取数据,希望通俗点谢谢

比如kafka配置的是两个分区,三个备份,一个主题,broker个数为三,那么我以下说的对吗?三个备份的话,每个broker下都有一个主题,同时主题里都有两…

自此以后,行同陌路 2022-01-06 21:53:44 747 0

Kafka 与 k8s/docker, 应用是共享还是独占??

想问下大家部署的kafka集群是共享集群,还是独占集群。 是一个应用,部署一套Kafka集群+k8s。 还是共享一个Kafka集群,上面通过不同的topics来区分应…

狼亦尘 2022-01-06 09:41:18 757 0

flink 并发读取kafka数据问题

各位,小弟请教个问题: 你好,想跟你请教个问题: 各位好:刚开始学习flink,有个问题请教: &nbsp我搭建了有5个节点的flink集群(standalone 模式)…

岁吢 2022-01-06 07:06:55 869 0
更多

推荐作者

不再见

文章 0 评论 0

真是无聊啊

文章 0 评论 0

樱娆

文章 0 评论 0

浅语花开

文章 0 评论 0

烛光

文章 0 评论 0

绻影浮沉

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文