流数据湖平台Apache Paimon(三)Flink进阶使用

流数据湖平台Apache Paimon(三)Flink进阶使用

2.9 进阶使用2.9.1 写入性能Paimon的写入性能与检查点密切相关,因此需要更大的写入吞吐量:增加检查点间隔,或者仅使用批处理模式。增加写入缓冲区大小。启用写缓冲区溢出。如果您使用固定存储桶模式,请重新调整存储桶数量。2.9.1.1 并行度建议sink的并行度小于等于bucket的数量,最好...

Apache RocketMQ 5.0 消息进阶:如何支撑复杂的业务消息场景?

Apache RocketMQ 5.0 消息进阶:如何支撑复杂的业务消息场景?

作者:隆基一致性首先来看 RocketMQ 的第一个特性-事务消息,事务消息是 RocketMQ 与一致性相关的特性,也是 RocketMQ 有别于其他消息队列的最具区分度的特性。以大规模电商系统为例,付款成功后会在交易系统中订单数据库将订单状态更新为已付款。然后交易系统再发送一条消息给 Rocke...

Apache RocketMQ:如何从互联网时代演进到云

1 课时 |
154 人已学 |
免费

Apache Flink 入门到实战 - Flink开源社区出品

16 课时 |
1392 人已学 |
免费

Apache Flink 入门

9 课时 |
4826 人已学 |
免费
开发者课程背景图
Web 进阶——Apache

Web 进阶——Apache

Web 进阶——Apache一、Apache 优化1.安装 Apache2.配置 Apache 保持连接、网页传输压缩、页面缓存时间1)保持连接、长连接(Keep-alive)2)网页传输压缩3)页面缓存时间3.配置 Apache 隐藏版本号1)第一种方法2)第二种方式4.配置 Apache 防盗链...

Apache Flink 进阶(十二):深度探索 Flink SQL

Apache Flink 进阶(十二):深度探索 Flink SQL

作者:贺小令(晓令)整理:郑仲尼 本文根据 Apache Flink 进阶篇系列直播整理而成,由阿里巴巴技术专家贺小令分享,文章将从用户的角度来讲解 Flink 1.9 版本中 SQL 相关原理及部分功能变更,希望加深大家对 Flink 1.9 新功能的理解,在使用上能够有所帮助。主要内容: 新 T...

Apache Flink 进阶(八):详解 Metrics 原理与实战

Apache Flink 进阶(八):详解 Metrics 原理与实战

作者:刘彪 整理:毛鹤 本文由 Apache Flink Contributor 刘彪分享,本文对两大问题进行了详细的介绍,即什么是 Metrics、如何使用 Metrics,并对 Metrics 监控实战进行解释说明。 什么是 Metrics? Flink 提供的 Metrics 可以在 Flin...

Apache Flink 进阶(七):网络流控和反压剖析

Apache Flink 进阶(七):网络流控和反压剖析

作者:张俊整理:张友亮(Apache Flink 社区志愿者) 本文共 4745字,预计阅读时间 15min。 本文根据 Apache Flink 系列直播整理而成,由 Apache Flink Contributor、OPPO 大数据平台研发负责人张俊老师分享。主要内容如下: 网络流控的概念与背景...

Apache Flink 进阶(六):Flink 作业执行深度解析

Apache Flink 进阶(六):Flink 作业执行深度解析

作者:岳猛整理:毛鹤 本文根据 Apache Flink 系列直播课程整理而成,由 Apache Flink Contributor、网易云音乐实时计算平台研发工程师岳猛分享。主要分享内容为 Flink Job 执行作业的流程,文章将从两个方面进行分享:一是如何从 Program 到物理执行计划,二...

Apache Flink 进阶(五):数据类型和序列化

Apache Flink 进阶(五):数据类型和序列化

作者:马庆祥整理:毛鹤 本文根据 Apache Flink 系列直播整理而成,由 Apache Flink Contributor、360 数据开发高级工程师马庆祥老师分享。文章主要从如何为Flink量身定制的序列化框架、Flink序列化的最佳实践、Flink通信层的序列化以及问答环节四部分分享。 ...

Apache Flink 进阶(四):Flink on Yarn/K8s 原理剖析及实践

Apache Flink 进阶(四):Flink on Yarn/K8s 原理剖析及实践

作者:周凯波(宝牛) 整理:毛鹤 本文主要介绍 Flink on Yarn/K8s 的原理及应用实践,文章将从 Flink 架构、Flink on Yarn 原理及实践、Flink on Kubernetes 原理剖析三部分内容进行分享并对 Flink on Yarn/Kubernetes 中存在的...

Apache Flink 进阶入门(二):Time 深度解析

Apache Flink 进阶入门(二):Time 深度解析

作者:崔星灿整理:沙晟阳(成阳) 前言 Flink 的 API 大体上可以划分为三个层次:处于最底层的 ProcessFunction、中间一层的 DataStream API 和最上层的 SQL/Table API,这三层中的每一层都非常依赖于时间属性。时间属性是流处理中最重要的一个方面,是流处理...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

Apache Spark 中国技术社区
Apache Spark 中国技术社区
阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!
4459+人已加入
加入
相关电子书
更多
Apache Doris 精选用户案例集
Apache RocketMQ 云原生统一消息引擎
Apache Tomcat 的云原生演进
立即下载 立即下载 立即下载
相关镜像