Flink程序连接Kafka类型不匹配问题

我想把Flink连接Kafka封装成通用的方法,但是在使用java时,类型转换上遇到了问题,这个问题网上搜索到的资料很少,刚入门不久所以也不是很明白其中的原理,请各位同行指点我一下,不胜感激。*来自志愿者整理的flink邮件归档

windows下kafka1.0源码环境,日志清理报错,直接退出程序?报错

[2018-06-19 15:08:57,934] ERROR Error while loading log dir D:\WORK\002-KAFKA\kafka-1.0.1-src\kafka-logs (kafka.log.LogManager) java.nio.file.FileSyst...

消息队列Kafka入门课程

4 课时 |
3098 人已学 |
免费

分布式消息系统 Kafka 快速入门

24 课时 |
640 人已学 |
免费
开发者课程背景图

问个问题,一个有状态的flink程序消费kafka,如果切换kafka topic到一个#Flink

问个问题,一个有状态的flink程序消费kafka,如果切换kafka topic到一个新的topic,之前的状态是不是无法进行利用了?#Flink

阿里云OSS出现InvalidPartOrder 无效的分片顺序 , 存的是一些json, 程序是用flume采集kafka数据到oss数据有解决办法吗

阿里云OSS出现InvalidPartOrder 无效的分片顺序 , 存的是一些json, 程序是用flume采集kafka数据到oss数据有解决办法吗?

kafka 三台,linux环境,本地windows用kafka的client可以拉取到数据,将程序发布到服务器上,就不行了 什么坑

kafka 三台,linux环境,本地windows用kafka的client可以拉取到数据,将程序发布到服务器上,就不行了 什么坑

kafka作为消息调度程序进行flink - 分区

我有一个进程需要将一些数据发送到flink集群(通过kafka),由3个节点组成。据我所知,总共会有两个不同的主题。所有消息都将加上时间戳。消息顺序必须保持不变。我无法理解消息分区(密钥)背后的机制。如果我希望有一个如上所述的简单消息调度程序,消息分区是否重要?如果是这样,根据我应该选择什么?

flink1.4.2 使用kafka08jsontablesource,我们测试,kafka里没有数据的情况下,程序运行一段时间就会报这个exception

转自钉钉群21789141:flink1.4.2 使用kafka08jsontablesource,我们测试,kafka里没有数据的情况下,程序运行一段时间就会报这个exception,flink从1.4.2升级到1.5.3后,报找不到JsonRowSerializationSchema,是不是有些...

kafka 0.11x 启动30秒后自动停止,报【另一个程序正在使用此文件,进程无法访问】

环境:kafka_2.11-1.1.0,win7_64,java8 现象: 启动30秒后自动停止,报【另一个程序正在使用此文件,进程无法访问】 [2018-06-06 14:32:46,784] INFO [Log partition=myTopic-0, dir=D:\kafka_2.11-1.1...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

消息队列
消息队列
消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。
20+人已加入
加入
相关电子书
更多
任庆盛|Flink CDC + Kafka 加速业务实时化
消息队列 Kafka 版差异化特性
2019大数据技术公开课第五季—kafka 数据如何同步到 MaxCompute
立即下载 立即下载 立即下载