flink cdc写hdfs文件的时候,如果开启文件合并的话,最终的文件不能通过hive映射读取吗?

flink cdc写hdfs文件的时候,文件格式设置为parquet,压缩方式为GZIP,存在一个问题,如果开启文件合并的话,最终的文件不能通过hive映射读取,如果不开启的话,可以正常读取,这个怎么解决啊?

Flink的holo中int2 怎么映射?

Flink的holo中int2 怎么映射?我从mysql直接cast同步过去 然后有个int2 类型 然后我想拿这个表的binlog 但是字段类型是int2 ,只能用jdbc模式么?

实时数据分析:使用Flink实时发现最热Github项目

1 课时 |
404 人已学 |
免费

实时数据接入:5分钟上手 Flink MySQL 连接器

1 课时 |
204 人已学 |
免费

大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践

1 课时 |
174 人已学 |
免费
开发者课程背景图

Flink CDC异构数据源之间的数据映射关系吗?

Flink CDC异构数据源之间的数据映射关系吗?比如:Oracle 的NUMBER 同步到 MySQL 中 应该用什么类型?

Flink CDC里整库同步支持字段映射吗?

Flink CDC里整库同步支持字段映射吗?类型是一方面,字段位置,个数的映射这方面的。

Hologres源表定义的时候,可以映射为flink的timestmap么,那这个怎么映射呢?

在Hologres源表定义中,可以映射为Flink的Timestamp。具体映射方式如下: 在源表定义中,将时间列的数据类型设置为TIMESTAMP或者DATETIME。例如: CREATE TABLE source_table ( ... event_time TIMESTAMP, ... ); ...

Hologres源表定义的时候,可以映射为flink的timestmap么,那这个怎么映射呢?

Hologres源表定义的时候,可以映射为flink的timestmap么,那这个怎么映射呢?

Flink CDC映射后了hive元数据,这个首次映射业务库当然没有表了,他报的这个错误我不理解?

Flink CDC映射后了hive元数据,然后映射一张CDC的表提示hudi无这张表。这个首次映射业务库当然没有表了,他报的这个错误我不理解?那我用hive的元数据以后还怎么同步数据到hudi?

Flink CDC2.0.2的doris 映射paimon表不是有bug?

Flink CDC2.0.2的doris 映射paimon表不是有bug?不是只有2.0.3才可以吗?

Flink 为什么这里映射的端口不是6123?

Flink kubernetes.hostnetwork.enabled=true为什么这里映射的端口不是6123然后造成taskmanager和jobmanager通信超时 任务自动cancel 有大佬了解吗?正常应该会被识别到port才对

Flink CDC采集mongo 怎么才能直接映射成一个josn 而不是按字段?

Flink CDC采集mongo 怎么才能直接映射成一个josn 而不是按字段?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

阿里云实时计算Flink
阿里云实时计算Flink
一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。
199201+人已加入
加入
相关电子书
更多
基于 Flink SQL + Paimon 构建流式湖仓新方
基于 Flink CDC 打造 企业级实时数据集成方案
李劲松|Flink Table Store 典型应用场景
立即下载 立即下载 立即下载