apache-kafka

apache-kafka

文章 0 浏览 2

通过CSV文件,通过KAFKA API将数据从Azure Databricks流到Azure事件中心

我是Azure Databricks和Event Hubs的新手。我一直在努力使用SPARK和KAFKA API将数据从Databrick流传输到事件中心。我想要流的数据在.CSV文件中。流启…

三五鸿雁 2025-02-11 07:11:07 3 0

我正在尝试从kafkajs消费kafka消息,但无法阅读该消息,

我正在尝试从Kafkajs食用Kafka消息,但无法阅读该消息,请让我知道这个问题。知道如何解决这个问题吗? const kafka = new Kafka({ logLevel: logLeve…

悟红尘 2025-02-11 07:03:56 3 0

Confluent Kafka库是否允许在运行时间创建一个消费者组

我需要使用Kafka IADMinclient或任何其他将Kafka曝光的接口创建消费者组。 我了解,通过将true设置为允许。 就我而言,连接到活动中心。在事件中心,…

堇色安年 2025-02-11 06:17:09 2 0

FLINK -KAFKA连接器恰好一次错误

我正在使用Flink 1.15.0。 For Kafka integration I wrote KafkaSource: public static KafkaSource kafkaSource(String bootstrapServers, String to…

迷路的信 2025-02-11 05:25:26 2 0

用EJB配置Kafka消费者?是否可以使用EJB为KAFKA配置MDB?

我想用Apache Kafka消息消费者替换EJB中现有的JMS消息消费者。我无法弄清楚使用EJB配置配置Apache Kafka消费者的选项。…

听闻余生 2025-02-11 04:54:33 2 0

Spring Kafka握手故障无X.509客户端验证证书,但我的密钥库中有一个

我有一个我不知道的情况。 我在K8S中的Springboot应用程序中运行,并尝试使用公司内的Spring Kafka从Kafka主题中进行消费者,我必须使用SSL身份验证。…

眼藏柔 2025-02-11 04:53:00 1 0

火花流应用程序不断重置kafka偏移量

我有一个火花流应用程序,该应用程序在带有4个节点的Spark群集上运行。几天前,该应用程序不断重置kafka偏移量,并且在设置自动偏移重置时不再获取kaf…

聚集的泪 2025-02-11 04:39:49 3 0

无法在Nestjs进行Kafka事件

我在主和控制器文件中具有以下配置。我有一个外部kafka ,我在 main.ts 中定义了 app.connectMicroservice({ transport: Transport.KAFKA, options: {…

殤城〤 2025-02-11 03:29:07 1 0

Kafkareplytemplate投掷:支持答复需要Kafkatemplate?

这是。 现在,我得到 java.lang.illegalstateException:需要Kafkatemplate来支持答复。我的设置现在看起来像这样。 @Configuration @EnableKafka pub…

束缚m 2025-02-11 03:23:37 1 0

发送到Kafka时如何拆分Spark DataFrame?

我正在使用以下语句将我的数据装置写给Kafka。 dataFrame.write.format("kafka") .options(options).save() 不幸的是,上面的代码是将大量的数据帧写…

始终不够 2025-02-11 01:21:52 0 0

弗林布林窗口中的Flink聚合功能自动在两个窗户中拆分,以实现大窗口尺寸

我使用不同的窗口尺寸在某些记录上计算一个简单的均值。使用 1小时和 1周的Windows 没有问题,并且结果计算正确。 var keyed = src .filter(event -> …

笨笨の傻瓜 2025-02-11 01:15:48 4 0

试图称呼该方法弹簧kafka

我在将Spring-Kafka与Spring-Boot集成在一起时遇到了一些麻烦。我使用Spring Boot v2.1与Spring-Kafka v2.2(应根据矩阵兼容)。 我已经看到了多个类…

不羁少年 2025-02-11 01:01:59 1 0

使用Kafka Connect时,如何根据AVRO方案转换所有时间戳字段?

在我们的数据库中,我们有20多个字段,我们需要从长时间转换为时间戳。为什么没有通用解决方案来传输所有这些值? 我知道我可以定义: "transforms":"…

弥枳 2025-02-11 00:16:43 3 0

如何在Golang嘲笑Kafka的依赖性和作家?

我有一个结构, type Server struct { grpcServerPort int grpcServer *grpc.Server writer *kafka.Writer } 该服务器有很多方法,包括 - func NewSer…

绮筵 2025-02-10 23:24:46 3 0

Elasticsearch无法到达:[http:// kafka:9200/] [manticore :: socketException]连接拒绝

我正在尝试使用Logstash,Elastic Search,Kafka和Kibana运行Spring应用程序。 [main] Attempted to resurrect connection to dead ES instance, but …

肩上的翅膀 2025-02-10 22:30:33 1 0
更多

推荐作者

佚名

文章 0 评论 0

今天

文章 0 评论 0

゛时过境迁

文章 0 评论 0

达拉崩吧

文章 0 评论 0

呆萌少年

文章 0 评论 0

孤者何惧

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文