flink cdc sql将一个source,sink到pg和kafka,这种场景支持吗?

flink cdc sql将一个source,sink到pg和kafka,这种场景支持吗?

【Kafka系列】Kafka事务一般在什么场景下使用呢

【Kafka系列】Kafka事务一般在什么场景下使用呢

面试官:听说你精通Kafka,那我就考考你吧 面试官:不用慌尽管说,错了也没关系。。。 以【面试官面试】的形式来分享技术,本期是《Kafka系列》,感兴趣就关注我吧❤️ 面试官:生产者重试机制导致Kafka重复消息,知道怎么处理吗 噢噢,Kafka支持幂等生产者,可以开启这个模块。 它是这样的,发送...

消息队列Kafka入门课程

4 课时 |
3098 人已学 |
免费

分布式消息系统 Kafka 快速入门

24 课时 |
640 人已学 |
免费
开发者课程背景图

请问下部署数据库和Kafka这两个场景适合用函数计算FC吗?

请问下部署数据库和Kafka这两个场景适合用函数计算FC吗?

Flink CDC一个场景中需要关联十几张表并聚合,每次变更都会更新到Kafka很多数据?

Flink CDC一个场景中需要关联十几张表并聚合,我现在使用了upsertkafaka将这个大融合切成多个,但是现在问题是这样每个新任务基于上次的upsert Kafka数据量非常大,每次变更都会更新到Kafka很多数据?有没有更好的方式比如结合ice格式的流融合?es8 table connec...

请教大佬们,有没有遇到过一个问题,场景:消费KAFKA写ES过程中,作业假死。现象:作业没有报错,但

请教大佬们,有没有遇到过一个问题,场景:消费KAFKA写ES过程中,作业假死。现象:作业没有报错,但是不消费KAFKA了,也不写ES了,数据不流动了 kafka大概60-180个分区不等 我是一套代码 跑了10个程序 消费了不同的TOPIC

多云与混合云场景下的数据同步方案-KAFKA

多云与混合云场景下的数据同步方案-KAFKA

1 企业业务系统部署架构的变化趋势-多云与混合云现阶段,企业信息系统部署架构 (DA: Deploy architecture)的一大变化是,越来越多的企业在不断将越来越多的应用部署到云上,即***业务系统上云的趋势愈演愈烈***。不过企业业务系统上云不是一蹴而就的,也不是单向的一帆风顺的。 这里涉...

一文告诉你为什么时序场景下 TDengine 数据订阅比 Kafka 好

一文告诉你为什么时序场景下 TDengine 数据订阅比 Kafka 好

在 TDengine 3.0 中,我们对流式计算、数据订阅功能都进行了再升级,帮助用户极大简化了数据架构的复杂程度,降低整体运维成本。TDengine 提供的类似消息队列产品的数据订阅、消费接口,本质上是为了帮助应用实时获取写入 TDengine 的数据,或者以事件到达顺序处理数据,与其他消息队列相...

Flink CDC这个权限问题的么,场景是从Kafka -> hive ,通过FlinkSQL实现?

Flink CDC这个权限问题的么,场景是从Kafka -> hive ,通过FlinkSQL实现,在dolphinscheduler调度。Permission denied: user=dolphinscheduler, access=READ, inode="/warehouse/tabl...

聊聊 Kafka:Kafka 消息重复的场景以及最佳实践

聊聊 Kafka:Kafka 消息重复的场景以及最佳实践

一、前言上一篇我们讲了 聊聊 Kafka:Kafka 消息丢失的场景以及最佳实践,这一篇我们来说一说 Kafka 消息重复的场景以及最佳实践。我们下面会从以下两个方面来说一下 Kafka 消息重复的场景以及最佳实践。生产者重复消息消费者重复消息二、Kafka 消息重复的场景2.1 生产者重复消息2....

聊聊 Kafka:Kafka 消息丢失的场景以及最佳实践

聊聊 Kafka:Kafka 消息丢失的场景以及最佳实践

一、前言大家好,我是老周,有快二十多天没有更新文章了,很多小伙伴一直在催更。先说明下最近的情况,最近项目上线很忙,没有时间写,并且组里有个同事使用 Kafka 不当,导致线上消息丢失,在修复一些线上的数据,人都麻了。事情是这样,有个 Kafka 消费者实例&...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

消息队列
消息队列
消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。
20+人已加入
加入
相关电子书
更多
任庆盛|Flink CDC + Kafka 加速业务实时化
消息队列 Kafka 版差异化特性
2019大数据技术公开课第五季—kafka 数据如何同步到 MaxCompute
立即下载 立即下载 立即下载