flink作业数据来源是kafka ,配置偏移量策略是earlest,有什么办法吗?

flink作业数据来源是kafka ,配置偏移量策略是earlest,而且作业使用了rockdb状态后端,状态的生命周期是1个月, 目前kafka中的数据只能存3天,但是作业需要停7天 ,想重启作业时尽可能的多消费数据 且 停止作业时的保存点中的状态不丢数 ,有什么办法吗? 是直接就保存保存点 然后...

一文搞懂Kafka中的listeners配置策略

一文搞懂Kafka中的listeners配置策略

listeners中的plaintext controller external是什么意思?Kraft模式下controller和broker有何区别?集群节点之间同步什么数据,通过哪个端口,是否可以自定义端口?客户端通过哪个端口连接到kafka,通过9092连接的是什么,broker还是contr...

消息队列Kafka入门课程

4 课时 |
3098 人已学 |
免费

分布式消息系统 Kafka 快速入门

24 课时 |
640 人已学 |
免费
开发者课程背景图

[帮助文档] 配置Kafka开启Ranger权限

本文介绍了Kafka如何开启Ranger权限控制,以及Ranger Kafka权限配置说明。

[帮助文档] 如何配置Kafka

本文介绍如何创建、查看、编辑、删除Kafka自定义连接器任务。

[帮助文档] 如何配置消息队列Kafka版的客户端参数

本文介绍客户端参数的配置规则,请根据实际业务场景配置适当的值。

[帮助文档] 自定义连接器中Workers的概念及配置

本文介绍自定义连接器中Workers的概念及配置。

[帮助文档] Kafka自定义连接器中的基本概念和连接配置

Kafka自定义连接器可以从Kafka集群中提取数据或将Kafka数据推送到其他系统,本文介绍Kafka自定义连接器中的基本概念和连接配置。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。