同城高可用
在购买实时计算Flink版时，您需要选中 是否启用跨可用区，并填写 计算资源配额，选择对应的主备可用区和虚拟交换机，详情请参见 开通实时计算Flink版。在跨可用区项目空间创建并运行作业，详情请参见 进入目标项目空间。方式2：已有工作...
修改虚拟交换机
如果您重新规划了IPv4网段或遇到作业启动...实时计算Flink版默认不具备访问公网的能力，但通过在VPC中创建NAT网关，并创建SNAT条目，将Flink所在的交换机绑定至弹性公网IP（EIP），即可通过EIP访问公网，详情请参见 Flink全托管如何访问公网？
步骤一：准备工作
同步RAM用户账号至Dataphin 步骤三：实时计算Flink版、Quick BI开通与配置 主流程 描述 操作指导 开通实时计算Flink版 购买实时计算Flink版。开通实时计算Flink版 开通Quick BI（非必选）购买Quick BI。重要 非必选，也可以使用其他BI工具...
步骤一：准备工作
同步RAM用户账号至Dataphin 步骤三：实时计算Flink版、Quick BI开通与配置 主流程 描述 操作指导 开通实时计算Flink版 购买实时计算Flink版。开通实时计算Flink版 开通Quick BI（非必选）购买Quick BI。重要 非必选，也可以使用其他BI工具...
准备工作
本文介绍场景中RDS MySQL、实时计算Flink和表格存储产品的准备工作。使用RDS MySQL服务 首次使用RDS MySQL时，请根据如下步骤创建RDS MySQL实例以及创建数据库和账号等。创建RDS MySQL实例。具体操作，请参见 创建RDS MySQL实例。创建数据...
查看与修改作业运行状态
前提条件 其他阿里云账号或RAM用户共同使用实时计算Flink版产品时，需要为阿里云账号或RAM用户授权，以进行查看与修改作业运行状态等相关操作，详情请参见 作业操作账号授权。查看作业运行状态 登录 实时计算控制台。在 Flink全托管 页签，...
按登录方式授权
实时计算Flink版支持阿里云账号、阿里云RAM用户、阿里云RAM角色、资源目录成员方式登录并访问实时计算控制台，以及进行作业开发和运维。不同登录方式下需要被授权的主体（身份或账号）可能不同，本文通过示例为您介绍不同登录方式下，访问...
2024-03-13版本
同城高可用 开通实时计算Flink版 资源调整 管理项目空间 修改虚拟交换机 算子探查（公测）支持对运行中的SQL作业进行中间结果查询，减少排查数据正确性的难度。算子探查（公测）免费监控服务 开通Flink工作空间时，支持选择免费监控服务，...
废弃或恢复监控指标
如果您不需要实时计算Flink版监控告警功能或某些监控指标，您可以关闭对应工作空间的监控告警或废弃具体指标，以节省费用，后续有需要时可以重新恢复指标采集。本文为您介绍如何关闭监控告警、废弃监控指标，以及对应的恢复操作。注意事项 ...
云速搭部署 Flink 应用
通过云速搭实现一个 DataHub+Flink 的实时流计算引擎架构，利用 DataHub ...产品列表 专有网络VPC 对象存储OSS 实时计算Flink版 DataV数据可视化 数据总线DataHub 云速搭CADT 方案架构 操作步骤 具体操作步骤请参考《云速搭部署 Flink 应用》
云监控与ARMS告警服务功能对比
实时计算Flink版支持选择云监控（免费监控服务）或ARMS可观测监控Prometheus版监控服务为您提供作业监控告警功能。本文介绍云监控和ARMS在Flink监控告警上的功能差异，您可以根据实际需要进行选择。功能对比 对比项 功能 ARMS 云监控 服务...
网络架构升级
为了提高服务质量并满足不断增长的业务需求，我们将对实时计算Flink版网络架构进行重要升级。此次升级旨在优化IP资源的使用效率，加强网络安全隔离措施，并为支持同城高可用CU类型奠定基础，为您带来更加稳健和高效的数据处理体验。您可以...
如何购买Flink半托管集群
问题描述 如何购买Flink半托管集群 问题原因 查看Flink全托管控制台，存在Flink半托管/ACK的选项，但是没有找到创建Flink半托管的入口。解决方案 目前Flink控制台已不再支持创建Flink半托管集群...更多信息 产品形态 适用范围 实时计算Flink版
Flink SQL作业快速入门
已创建Flink工作空间，详情请参见 开通实时计算Flink版。步骤一：创建作业 进入SQL作业创建页面。登录 实时计算控制台。单击目标工作空间 操作 列下的 控制台。在左侧导航栏，单击 SQL开发。单击 新建。单击 空白的流作业草稿。Flink也为您...
实时计算开发控制台显示服务暂不可用
问题描述 实时计算开发控制台显示服务暂不可用。问题原因 1....SLB可以让您以公网的形式访问Flink全托管实例，如果SLB欠费7天没有续费，SLB将会被释放，释放后就不能通过公网访问。2.VVP版本更新可能会导致一段时间内...适用范围 实时计算Flink版
实时计算Flink版的审计事件
实时计算Flink版已与操作审计服务集成，您可以在操作审计中查询用户操作实时计算Flink版产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了...
实时计算Flink读写OSS或者OSS-HDFS
具体操作，请参见 开通实时计算Flink版。开通Flink全托管后，Flink全托管 页签将在5~10分钟内显示已创建完成的 工作空间。已创建SQL作业。创建SQL作业时，Flink计算引擎需选择VVR 8.0.1及以上版本。具体操作，请参见 新建作业。使用限制 仅...
功能发布记录
Flink产品重大变更或者活动公告信息请在 实时计算控制台 或者 实时计算Flink版产品公告 上进行查看。企业级状态后端存储GeminiStateBackend，以及其与RocksDBStateBackend的性能对比情况，请参见 企业级状态后端存储介绍。
数据库实时入仓快速入门
实时计算Flink版提供了丰富强大的数据实时入仓能力。通过Flink的全增量自动切换、元信息自动发现、表结构变更自动同步和整库同步等功能，简化了数据实时入仓的链路，使得实时数据同步更加高效便捷。本文介绍如何快速构建一个从MySQL到...
教程概述
本案例使用阿里云DTS将您的增量数据同步到DataHub上，再通过阿里云实时计算Flink订阅DataHub的数据进行实时计算，并将结果插入到RDS数据库中，最终通过DataV大屏进行展示。说明 本案例仅提供具体的操作指导，业务场景和数据与实际情况会有...
实时模式配置概述
配置项 描述 资源配置 开源Flink实时计算源 对于开源Flink创建的实时任务，任务的实时模式资源配置支持配置任务的生产环境和开发环境的资源队列、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。...
JAR作业开发
Flink源代码中只有明确标注了@Public或者@PublicEvolving的才是公开供用户调用的方法，阿里云实时计算Flink版只对这些方法的兼容性做出产品保证。如果是Flink服务内置的Connector支持的datastream api，建议使用其内置的依赖。作业开发 ...
Datastream JAR迁移
本文为您介绍如何将自建Flink集群上的Datastream JAR作业，迁移至实时计算Flink全托管的JAR作业类型中。背景信息 本文介绍的迁移场景如下图所示。前提条件 本地已安装Maven 3.x。已在 Maven资源中心 下载了开源JDBC Connector包，包括 ...
实践教程
EMR on ECS 手工缩容节点组 更换集群损坏的本地盘 为集群配置弹性伸缩规则 EMR Serverless StarRocks 基于DataFlow集群的Flink服务使用CTAS语句同步MySQL数据至StarRocks 基于实时计算Flink使用CTAS语句同步MySQL数据至StarRocks 使用Flink...
管理项目空间
注意事项 使用RAM用户或RAM角色等身份访问实时计算控制台并管理项目空间时，需要其具备相应权限，权限详情请参见 RAM授权。新购工作空间时开启或者已有工作空间开启的同城高可用，系统会自动生成一个额外的默认同城高可用项目空间，名称为...
生态对接概述
阿里云生态 云数据库HBase版 基于HBase和Spark的数据处理平台 阿里云实时计算Flink 基于Flink的资讯场景实时数仓 大数据计算服务MaxCompute 接入MaxCompute 数据传输服务DTS 使用DTS同步MySQL 容器服务Kubernetes版 在Knative上实现Kafka...
Table/SQL JAR迁移至SQL
实时计算Flink全托管版集群内置了商业化的RDS Connector，您也可以替换为开源JDBC Connector。商业化的RDS Connector详情请参见 云数据库RDS MySQL结果表。本文介绍的迁移场景如下图所示。前提条件 本地已安装Maven 3.x。已在 Maven资源...
方案背景
实时计算Flink通过与表格存储对接，进行数据的实时分析，然后将计算结果写回到表格存储中存储。实时计算Flink主要用于对设备元数据进行流计算作业或者对接Kafka等消息队列订阅消息。方案优势 数据自动分区和负载均衡。采用存储计算分离架构...
数据总线DataHub
} 常见问题 实时计算Flink版支持的连接器列表，请参见 支持的连接器。您可以使用Kafka连接器来访问DataHub，Kafka连接器使用详情，请参见 消息队列Kafka。分裂或者缩容DataHub Topic后导致Flink作业失败，如何恢复？可以删除正在消费的...
实时模式配置概述
配置项 描述 资源配置 Ververica Flink实时计算源 对于Ververica Flink创建的流批一体任务，任务的实时模式资源配置支持配置任务的生产环境和开发环境的资源队列、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task ...
离线模式配置概述
资源配置 开源Flink实时计算源 对于开源Flink创建的流批一体任务，任务的离线模式资源配置支持配置任务的生产环境和开发的资源队列、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。配置说明，请...
管理域名
在实时计算控制台上，您可以管理上下游服务的域名。本文为您介绍如何在实时计算控制台上新增域名、修改域名和删除域名。使用限制 填写域名时，不支持填写大写字符。单个工作空间最多只能设置50个合法域名。当工作空间状态为运行中时，才...
配置实时模板运行参数
实时模板默认运行参数如下：Flink实时计算引擎 execution.checkpointing.interval:'180s' execution.checkpointing.min-pause:'180s' table.exec.state.ttl:36 h Ververica Flink实时计算引擎 execution.checkpointing.externalized-...
迁移操作
本文为您介绍如何将Bayes上的作业迁移到 实时计算开发控制台，包括迁移步骤、使用限制和注意事项。前提条件 您已具备Bayes对应项目的Owner权限和目标Flink项目空间的Owner权限，Flink权限管理详情，请参见 权限管理。Flink工作空间和Bayes...
配置Ververica Flink实时模式资源
资源配置类型 系统推荐配置 即实时计算Flink配置细粒度资源的智能模式（BETA），智能模式为专家模式的升级版。在智能模式下，作业将启用专家模式的资源配置，同时开启AutoPilot自动调优功能。在智能配置模式下，您无需配置相关资源，...
配置Ververica Flink实时模式资源
资源配置类型 系统推荐配置 即实时计算Flink配置细粒度资源的智能模式（BETA），智能模式为专家模式的升级版。在智能模式下，作业将启用专家模式的资源配置，同时开启AutoPilot自动调优功能。在智能配置模式下，您无需配置相关资源，...
实时模式State配置
State是Flink实时任务维持和管理数据状态的机制。通过合理的配置Flink的State数据过期时间可以提高资源利用率、内存管理、数据一致性和容错性。本文将为您介绍如何配置Flink实时任务的State过期时间。操作步骤 请参见 实时模式配置入口，...
计算与分析概述
Flink 宽表模型 时序模型 使用Flink 通过实时计算Flink访问 表格存储 中的源表、维表或者结果表，实现大数据实时计算与分析。目前数据表支持作为源表、维表或者结果表，时序表只支持作为结果表。PrestoDB 宽表模型 通过PrestoDB使用...
实时模式State配置
State是Flink实时任务维持和管理数据状态的机制。通过合理的配置Flink的State数据过期时间可以提高资源利用率、内存管理、数据一致性和容错性。本文将为您介绍如何配置Flink实时任务的State过期时间。操作步骤 请参见 实时模式配置入口，...
概述
例如，需要统计在过去的1分钟内有多少用户单击了某个网页，可以通过定义一个窗口来收集最近1分钟内的数据，并对这个窗口内的数据进行实时计算。Flink SQL支持的窗口聚合主要是两种：Window聚合和Over聚合。本文档主要为您介绍Window聚合。...
- 产品推荐
- 这些文档可能帮助您