请教一个问题,flink写hdfs文件的时候,文件格式设置为parquet,这个怎么解决啊?

请教一个问题,flink写hdfs文件的时候,文件格式设置为parquet,压缩方式为GZIP,存在一个问题,如果开启文件合并的话,最终的文件不能通过hive映射读取,如果不开启的话,可以正常读取,这个怎么解决啊?

flink cdc读parquet格式数据报这个错误谁遇到过啊?

NoSuchMethodError shaded.parquet.org.apache.thrift.protocol.TProtocol.getSchemaflink cdc读parquet格式数据报这个错误谁遇到过啊? 原生java读取就可以 应该是jar包冲突了怎么办?

实时数据分析:使用Flink实时发现最热Github项目

1 课时 |
404 人已学 |
免费

实时数据接入:5分钟上手 Flink MySQL 连接器

1 课时 |
204 人已学 |
免费

大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践

1 课时 |
174 人已学 |
免费
开发者课程背景图

flink自动合并新录入的数据到有iceberg表底层parquet的排序怎么保证呀?

flink自动合并新录入的数据到有sort-order的table,iceberg表底层parquet的排序怎么保证呀?

[帮助文档] Parquet格式的使用方法和类型映射

本文为您介绍Parquet格式的使用方法和类型映射。

flink读取 hdfs的parquet文件时,有没有忽略损坏文件的配置?

flink读取 hdfs的parquet文件时,有没有忽略损坏文件的配置。spark里面是有这个参数的?Flink Filesystem connector

Flink1.15读取hdfs目录下所有parquet文件并生成hfile

我需要使用flink1.15去读取hdfs目录下的parquet文件,并且将其转为hfile,请问有合适的样例不,非常感谢 希望可以提供可运行样例,而非gpt样例

有偿求助,Flink1.15读取hdfs中的parquet文件的Java样例

网上都是1.9版本的,里面用到的ParquetRowInputFormat在下面的依赖中已经没有了! org.apache.flink flink-parquet 1.15.0

Flink中parquet文件的类型是在建表的时候指定的么?

Flink中parquet文件的类型是在建表的时候指定的么?

Flink中hive表parquet存储查数据时候出现了这个异常,这种类型不支持int么?

Flink中hive表parquet存储查数据时候出现了这个异常,这种类型不支持int么?

flink sink hdfs parquet 写3级目录,老是报错,加资源感觉不好使,为什么?

flink sink hdfs parquet 写3级目录。老是报java heap space。有没有哪位大佬在这里有心得啊,加资源感觉不好使

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

阿里云实时计算Flink
阿里云实时计算Flink
一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。
199201+人已加入
加入
相关电子书
更多
基于 Flink SQL + Paimon 构建流式湖仓新方
基于 Flink CDC 打造 企业级实时数据集成方案
李劲松|Flink Table Store 典型应用场景
立即下载 立即下载 立即下载