[帮助文档] 如何配置Kafka

本文介绍如何创建、查看、编辑、删除Kafka自定义连接器任务。

我现在用的datawork版本数据源配置里只有kafka,但是我们用的pulsar,我配置了?

我现在用的datawork版本数据源配置里只有kafka,但是我们用的pulsar,我配置了pulsar集群地址,但是连接不上,问下支持连pulsar吗?

消息队列Kafka入门课程

4 课时 |
3098 人已学 |
免费

分布式消息系统 Kafka 快速入门

24 课时 |
640 人已学 |
免费
开发者课程背景图

[帮助文档] 如何配置消息队列Kafka版的客户端参数

本文介绍客户端参数的配置规则,请根据实际业务场景配置适当的值。

[帮助文档] 自定义连接器中Workers的概念及配置

本文介绍自定义连接器中Workers的概念及配置。

[帮助文档] Kafka自定义连接器中的基本概念和连接配置

Kafka自定义连接器可以从Kafka集群中提取数据或将Kafka数据推送到其他系统,本文介绍Kafka自定义连接器中的基本概念和连接配置。

配置了canal到kafka数据同步,启动canal-kafka后,报错

参照Canal Kafka QuickStart中的说明,配置了canal到kafka数据同步,启动canal-kafka后,报 2018-10-12 15:26:32.189 [destination = example , address = /192.168.206.136:3306 , Ev...

canal.adapter下面的配置如下,请问一下如果mode:kafka,也要配置 canal地址

canal.adapter下面的配置如下,请问一下如果mode:kafka,也要配置 canal地址吗:canalServerHost: 127.0.0.1:11111 ,因为数据同步流程是这样的 canal -- >kafka-->hbase ,如果mode:kafka,那就没必要设置...

canal配置kafka相关参数后,导致canal无法启动,报错情况如下:

2019-08-26 15:06:34.481 [main] ERROR com.alibaba.druid.pool.DruidDataSource - testWhileIdle is true, validationQuery not set 2019-08-26 15:06:34.500 [...

配置中的kafka topic名称和在kafka 上自动创建的topic名称不一致

在1.1.4升级到1.1.5后,配置如下 canal.mq.dynamicTopic=canal_test_qa_test.selector_condition:test_qa_test.selector_condition 在kafka上创建的topic名称为canal_test_qa_test_...

动态Topic配置Kafka分发,canal.mq.topic能否不配置

动态Topic配置Kafka分发不同topic时,遇到如下问题: 配置方式参照如上图文档中示例5所示,库中有N个表,我只需要监听N-M个表,并通过不同的topic推送出去。 现在必须同时配置canal.mq.dynamicTopic和canal.mq.topic,否则canal会报错连接broker...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

消息队列
消息队列
消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。
20+人已加入
加入
相关电子书
更多
任庆盛|Flink CDC + Kafka 加速业务实时化
消息队列 Kafka 版差异化特性
2019大数据技术公开课第五季—kafka 数据如何同步到 MaxCompute
立即下载 立即下载 立即下载