Flink CDC中sink如果异常了 ,如何处理? 比如kafka宕机。数据会丢吗?

Flink CDC中sink如果异常了 ,如何处理? 比如kafka宕机。数据会丢吗?

Flink 处理 Kafka的数据,需要 join 一个基础表来计算,会实时的体现在 计算结果里吗?

请教一个问题:Flink 处理 Kafka的数据,需要 join 一个基础表来计算,如果这个基础表的数据有更新,会实时的体现在 计算结果里吗?还是说 基础表更新后,需要重新运行这个 flink 任务才可以起作用?

消息队列Kafka入门课程

4 课时 |
3098 人已学 |
免费

分布式消息系统 Kafka 快速入门

24 课时 |
640 人已学 |
免费
开发者课程背景图

请问Flink我配置了按时间戳获取kafka的数据,但是,时间对不上,比如我配置的时间戳是?

'scan.startup.mode' = 'timestamp'scan.startup.timestamp-millis 请问Flink我配置了按时间戳获取kafka的数据,但是,时间对不上,比如我配置的时间戳是16:55:00的数据,但是print的时候,还是能打印kafka元数据timest...

哪位大神帮忙看下,Flink中使用flink-connector-jdbc把kafka的数据?

哪位大神帮忙看下,Flink中使用flink-connector-jdbc把kafka的数据sink到mysql,kafka的数据有增删改类型,但是flink-connector-jdbc写sink时候,SQL语句只能是固定的插入,更新或删除,不能动态的写SQL,你们都怎么处理的这种问题?

大佬们,咨询下flink api可以延迟消费kafka中的数据吗?

大佬们,咨询下flink api可以延迟消费kafka中的数据吗?

flink 的kafkaSink 如果我kafka突然宕机了 那没有发送成功的数据 flink?

flink 的kafkaSink 如果我kafka突然宕机了 那没有发送成功的数据 flink的kafkaSink是怎么处理的。过期丢弃了还是怎么?kafka 宕机不会引起程序挂掉,所以上游发了数据 程序没有报错停止,但是kafka停了发不出去,直到kafka 恢复 这个数据是怎么处理的,会一直刷失...

Flink的mysql发生ddl变更后,这个ddl会修改kafka的数据吗?

Flink的mysql发生ddl变更后,这个ddl会修改kafka的数据吗?然后这个ddl还会存在kafka中吗?下游的sr或者paimon会收到ddl变更吗?

请问一下,flink 可以重复消费kafka里面的数据吗?

请问一下,flink 可以重复消费kafka里面的数据吗?比如:kafka有1万条数据,我第一次启动job任务。把数据都同步过去mysql了。然后我停掉job 任务,然后重新启动。这个时候flink 还会去消费kafka里面这一万条数据吗?

flink 1.16 对kafka 0.10 ,能消费数据,但不能写入数据,可以指定具体版本么?

flink 1.16 对kafka 0.10 ,能消费数据,但不能写入数据,可以指定具体版本么?

flink 读取kafka 数据写入Neo4j

1: 样例数据{"change":[{"kind":"insert","schema":"public","table":"sample","columnnames":["xzqhbm","qylx","ybbq",...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

消息队列
消息队列
消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。
20+人已加入
加入
相关电子书
更多
任庆盛|Flink CDC + Kafka 加速业务实时化
消息队列 Kafka 版差异化特性
2019大数据技术公开课第五季—kafka 数据如何同步到 MaxCompute
立即下载 立即下载 立即下载

云消息队列 Kafka 版数据相关内容

云消息队列 Kafka 版更多数据相关