[帮助文档] 实时计算Flink读写OSS或者OSS-HDFS

阿里云实时计算Flink支持通过连接器读写OSS以及OSS-HDFS数据。通过配置OSS或者OSS-HDFS连接器的输入属性,实时计算Flink会自动从指定的路径读取数据,并将其作为实时计算Flink的输入流,然后将计算结果按照指定格式写入到OSS或者OSS-HDFS的指定路径。

[帮助文档] 开源版本Flink如何使用JindoSDK处理OSS HDFS服务的数据

开源Flink不支持流式写入OSS-HDFS服务,也不支持以EXACTLY_ONCE语义写入存储介质。当您希望开源Flink以EXACTLY_ONCE语义流式写入OSS-HDFS服务,需要结合JindoSDK。

实时数据分析:使用Flink实时发现最热Github项目

1 课时 |
404 人已学 |
免费

实时数据接入:5分钟上手 Flink MySQL 连接器

1 课时 |
204 人已学 |
免费

大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践

1 课时 |
174 人已学 |
免费
开发者课程背景图

Flink写入OSS必须要开通oss-hdfs服务吗?

Flink写入OSS必须要开通oss-hdfs服务吗?

[帮助文档] Flink如何以EMR集群的方式可恢复性写入OSS-HDFS服务

可恢复性写入功能支持将数据以EXACTLY_ONCE语义写入存储介质。本文介绍Flink如何通过EMR集群的方式可恢复性写入OSS-HDFS服务。

Flink当前可以直接在 vvp 上创建存储在 oss-hdfs 的 paimon 表么?

Flink当前可以直接在 vvp 上创建存储在 oss-hdfs 的 paimon 表么?

在Flink这个oss key 可以正常访问 hudi的 oss-hdfs,但这里就报错了,为什么?

在Flink这个oss key 可以正常访问 hudi的 oss-hdfs,但这里就报错了,为什么?

阿里云全托管flink-vvp平台hudi connector实践(基于emr集群oss-hdfs存储)

阿里云全托管flink-vvp平台hudi connector实践(基于emr集群oss-hdfs存储)

1. 上游数据准备上游数据以mysql为例作为hudi入湖的上游应用表,详细的建表、插入及更新语句如下drop table if exists `sunyf_db`.`flink_test_02_hudi`; create table if not EXISTS `sunyf_db`.`flink_...

Flink里打包好的jar包上传运行,checkpoint在代码里可以设置oss-hdfs的地址么?

Flink里打包好的 jar 包上传运行,checkpoint 在代码里可以设置到 oss-hdfs 的地址么?

如果使用Jindo OSS-HDFS 作为底层存储 Flink这边需要做什么工作吗 ?

在非EMR集群 如果使用Jindo OSS-HDFS 作为Flink Checkpoint 保存的底层存储 Flink这边需要做什么工作吗 ?(运行在阿里云ACK上)

有通过阿里云实时托管版flink 写oss-hdfs 的案例吗?

有通过阿里云实时托管版flink 写oss-hdfs 的案例吗?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

阿里云实时计算Flink
阿里云实时计算Flink
一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。
199201+人已加入
加入
相关电子书
更多
基于 Flink SQL + Paimon 构建流式湖仓新方
基于 Flink CDC 打造 企业级实时数据集成方案
李劲松|Flink Table Store 典型应用场景
立即下载 立即下载 立即下载