flink-streaming

flink-streaming

文章 0 浏览 1

apache flink org.apache.hadoop.ipc.rpcexception:RPC响应将字符串写入HDFS时超过最大数据长度

探索如何从Apache Flink中写入HDFS,我尝试了以下操作: val sink: StreamingFileSink[String] = StreamingFileSink .forRowFormat(new Path("hdfs://…

凉城凉梦凉人心 2025-02-13 12:48:00 1 0

我如何计算钥匙状态弗林克的总指标

我正在尝试设计从许多(2-3个)Kafka主题到GreenPlum表的流式传输应用程序的Flink应用程序。每个主题都应在绿色的桌子上应用于自己的表格。要正确地将…

池予 2025-02-12 18:04:07 0 0

Flink Python DataStream API Kafka消费者-NoclassDeffoundError bytearrayDeserializer错误

我在pyflink的PY4J侧有一个错误。代码下面: env = StreamExecutionEnvironment.get_execution_environment() env.add_jars("file:/" + os.getcwd() +…

梨涡少年 2025-02-12 14:50:31 0 0

解析SQL并评估表达式

我有一个SQL查询,我想分析评估。我已经使用JSQL解析器解析了SQL。现在,我需要评估SQL中的子句中的。我想在Flink中作为过滤器功能的一部分进行。基本…

比忠 2025-02-12 08:55:05 1 0

即使在Pojos和Avro概念上,flink默认为Kryo序列化

我正在尝试进行弗林克状态模式进化的POC。我正在使用Flink 1.15.0和Java 11。 我尝试创建3个数据类 - 每种序列化类型之一: io.peleg.kryo.user - 使…

痴情换悲伤 2025-02-12 05:27:55 0 0

FLINK-通过REST API提交Flink作业时如何传递自定义参数

我需要在Flink作业中提供一个解密的密码,以将其连接到Redis。但是,Redis密码只能在本地机器上解密。因此,我的计划是首先在本地解密,然后在通过RES…

傲性难收 2025-02-12 00:31:45 1 0

使用Flink中的检查点功能,用户会调用prinitizestate和snapshotstate还是在幕后处理

我在此处按照一个示例: https://github.com/apache/flink/flink/blob/master/master/master/flink-streaming-java/src/src/main/java/java/java/org/…

离线来电— 2025-02-12 00:31:03 1 0

Flink禁用特定状态的保存点

我在一个弗林克工作中管理2个不同的状态。但是我不需要为其中一个带来保存点。其他,我必须采用保存点。 我不想为不需要的保存点拿出保存点,因为它将…

樱&纷飞 2025-02-11 20:15:10 1 0

Flink Elasticsearch Connector 7带SSL

在我的Flink工作中,我正在尝试使用 Elasticsearch7 连接器。当使用 elasticsearch7sinkbuilder 时,我找不到通过SSL通信的方法? 另外,还有一个弃用…

鯉魚旗 2025-02-11 17:41:47 1 0

如何将无界的水表发送到Kafka水槽?

我正在使用表API创建两个流,让我们称其为A和B。使用ExecutesQL我正在加入两个表。输出为表格。我想将连接的结果发送到Kafka水槽。请在下面找到代码。…

青衫负雪 2025-02-11 12:05:03 1 0

Flink插入MySQL最新数据行

我在MySQL中得到了一个建议表,该表中有3列:user_id,item_id,stark,Flink将计算一些建议并在用户单击项目时将结果插入mySQL,我只希望MySQL存储由…

dawn曙光 2025-02-11 07:42:30 1 0

FLINK -KAFKA连接器恰好一次错误

我正在使用Flink 1.15.0。 For Kafka integration I wrote KafkaSource: public static KafkaSource kafkaSource(String bootstrapServers, String to…

迷路的信 2025-02-11 05:25:26 1 0

如何将包含时间段_ltz的表转换为pyflink 1.15.0中的dataStream?

我使用pyflink 1.15.0的Kinesis连接器读取事件使用源表。 An example of the sorts of data that are in this stream is 请注意,数据流包含许多不同…

江南月 2025-02-10 21:43:03 1 0

无法运行Flink Jar:标识符的多个工厂;默认值'该实施

我正在使用以下提到的POM文件来编写Flink代码, 2025-02-10 13:45:30 3 0

如何设置Flink TaskManager总截flink内存?

我想在Kubernetes上运行很多Pyflink作业,那里处理的状态和事件数量很小,因此我想在群集中使用尽可能少的内存,以便我可以大部分包装包装。有效。我…

同展鸳鸯锦 2025-02-10 04:02:48 2 0
更多

推荐作者

李珊平

文章 0 评论 0

Quxin

文章 0 评论 0

范无咎

文章 0 评论 0

github_ZOJ2N8YxBm

文章 0 评论 0

若言

文章 0 评论 0

南…巷孤猫

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文