实时计算Flink版产品公告

【计费变更】实时计算Flink版监控服务ARMS Prometheus上线新版计费模式 自2023年12月8日起,实时计算Flink版对接ARMS Prometheus新版计费模式,可观测监控Prometheus版专家版的计费模式变更为按写入的可观测数据量收费,相比旧版计费预估可...

准备工作

本文介绍场景中RDS MySQL、实时计算Flink和表格存储产品的准备工作。使用RDS MySQL服务 首次使用RDS MySQL时,请根据如下步骤创建RDS MySQL实例以及创建数据库和账号等。创建RDS MySQL实例。具体操作,请参见 创建RDS MySQL实例。创建数据...

开通实时计算Flink版

使用实时计算Flink版需要开通工作空间,每个工作空间的计算资源隔离,开发控制台相互独立。本文为您介绍开通Flink工作空间的操作步骤,以及开通过程中的注意事项。前提条件 已拥有阿里云账号。如果您还没有阿里云账号,请先完成注册,详情...

步骤一:准备工作

同步RAM用户账号至Dataphin 步骤三:实时计算Flink版、Quick BI开通与配置 主流程 描述 操作指导 开通实时计算Flink版 购买实时计算Flink版。开通实时计算Flink版 开通Quick BI(非必选)购买Quick BI。重要 非必选,也可以使用其他BI工具...

步骤一:准备工作

同步RAM用户账号至Dataphin 步骤三:实时计算Flink版、Quick BI开通与配置 主流程 描述 操作指导 开通实时计算Flink版 购买实时计算Flink版。开通实时计算Flink版 开通Quick BI(非必选)购买Quick BI。重要 非必选,也可以使用其他BI工具...

云产品集成

实时计算 Flink 中使用 OceanBase 连接器的详细操作,请参见:什么是阿里云实时计算Flink版实时计算 Flink 中使用 OceanBase 连接器 数据库管理 DMS 数据管理 DMS(Data Management)是一款支撑数据全生命周期的一站式数据管理...

引擎版本介绍

阿里云Flink采用的是基于Apache Flink增强的企业级引擎Ververica Runtime(简称VVR)。本文为您详细介绍引擎版本号及含义、引擎服务承诺与建议。...实时计算Flink版的产品形态、发布状态及选型建议,详情请参见 产品形态。

概述

实时计算Flink版支持在Flink SQL作业中使用Python自定义函数,本文为您介绍Flink Python自定义函数的分类、Python依赖使用方法和能调优方式。自定义函数分类 分类 描述 UDSF(User Defined Scalar Function)用户自定义标量值函数,将0个、...

监控服务ARMS Prometheus计费模式变更

自2023年12月8日起,实时计算Flink版对接ARMS Prometheus新版计费模式,可观测监控Prometheus版专家版的计费模式变更为按写入的可观测数据量收费。变更优势 相比旧版计费模式,费用预估可节省55%以上。新版计费模式下费用节省情况请参见 ...

查看与修改作业运行状态

前提条件 其他阿里云账号或RAM用户共同使用实时计算Flink版产品时,需要为阿里云账号或RAM用户授权,以进行查看与修改作业运行状态等相关操作,详情请参见 作业操作账号授权。查看作业运行状态 登录 实时计算控制台。在 Flink全托管 页签,...

方案背景

阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台,提供端到端亚秒级实时数据分析能力,并通过标准SQL降低业务开发门槛,助力企业向实时化、智能化大数据计算升级转型。更多信息,请参见 什么是阿里云实时计算...

按登录方式授权

实时计算Flink版支持阿里云账号、阿里云RAM用户、阿里云RAM角色、资源目录成员方式登录并访问实时计算控制台,以及进行作业开发和运维。不同登录方式下需要被授权的主体(身份或账号)可能不同,本文通过示例为您介绍不同登录方式下,访问...

2024-03-13版本

同城高可用 开通实时计算Flink版 资源调整 管理项目空间 修改虚拟交换机 算子探查(公测)支持对运行中的SQL作业进行中间结果查询,减少排查数据正确性的难度。算子探查(公测)免费监控服务 开通Flink工作空间时,支持选择免费监控服务,...

废弃或恢复监控指标

如果您不需要实时计算Flink版监控告警功能或某些监控指标,您可以关闭对应工作空间的监控告警或废弃具体指标,以节省费用,后续有需要时可以重新恢复指标采集。本文为您介绍如何关闭监控告警、废弃监控指标,以及对应的恢复操作。注意事项 ...

安全白皮书

实时计算Flink版完全兼容开源Apache Flink API,从访问控制、网络、存储、备份恢复、操作审计等方面,提供全面的安全加固功能来保障您的数据安全。租户隔离 支持多租户的使用场景,通过阿里云账号认证体系(认证方式采用AccessKey对称密钥...

云速搭部署 Flink 应用

通过云速搭实现一个 DataHub+Flink 的实时流计算引擎架构,利用 DataHub ...产品列表 专有网络VPC 对象存储OSS 实时计算Flink版 DataV数据可视化 数据总线DataHub 云速搭CADT 方案架构 操作步骤 具体操作步骤请参考《云速搭部署 Flink 应用》

算子探查(公测)

实时计算Flink版提供了算子探查功能,可以在不修改作业的情况下,探查选中算子的输入输出情况,帮助您更好地排查数据正确性问题。使用限制 仅支持运行中的SQL作业。仅支持实时计算引擎VVR 8.0.4及以上版本作业。不支持CTAS、CDAS作业。不...

Flink JAR作业快速入门

本文带您快速体验Flink JAR流作业和批作业的创建、部署和启动,以了解实时计算Flink版JAR作业的操作流程。前提条件 如果您使用RAM用户或RAM角色等身份访问,需要确认已具有Flink控制台相关权限,详情请参见 权限管理。已创建Flink工作空间...

任务编排(公测)

任务编排是一个全托管的工作流调度服务,通过可视化的操作界面轻松地编排批作业运行的顺序,构建数据仓库,在实时计算Flink版平台实现开发、调度、部署和运维一体化。重要 任务编排目前为公测功能,公测阶段不保障服务等级协议SLA。如果您...

通过Flink访问宽表引擎

您可以使用社区版Flink或阿里云实时计算版Flink访问 云原生多模数据库 Lindorm 宽表。本文介绍同时适用于阿里云Flink和社区版Flink访问Lindorm宽表的方法。背景信息 您可以将 云原生多模数据库 Lindorm 宽表作为Flink中的维表或者结果表,...

使用Flink写入时序引擎

实时计算Flink版的开通,请参见 开通实时计算Flink版。说明 实时计算Flink版需要VVR 4.0.13及以上版本,VVR 4.0.13版本是基于Apache Flink 1.13。为了保证网络的连通性,确保 云原生多模数据库 Lindorm 实例和实时计算Flink使用相同的专有...

云监控与ARMS告警服务功能对比

实时计算Flink版支持选择云监控(免费监控服务)或ARMS可观测监控Prometheus版监控服务为您提供作业监控告警功能。本文介绍云监控和ARMS在Flink监控告警上的功能差异,您可以根据实际需要进行选择。功能对比 对比项 功能 ARMS 云监控 服务...

2024-04-01版本

本文为您介绍2024年4月1日发布的实时计算Flink版的重大功能变更和主要缺陷修复。重要 本次升级计划在全网逐步进行灰度,预计3-4周完成全部升级,具体计划请关注 实时计算控制台 页面右侧的最新公告。如果您不能使用相关新功能,说明您的...

网络架构升级

为了提高服务质量并满足不断增长的业务需求,我们将对实时计算Flink版网络架构进行重要升级。此次升级旨在优化IP资源的使用效率,加强网络安全隔离措施,并为支持同城高可用CU类型奠定基础,为您带来更加稳健和高效的数据处理体验。您可以...

通过Flink读写云原生数据仓库AnalyticDB PostgreSQL...

本文介绍如何通过阿里云实时计算Flink版实时读写云原生数据仓库 AnalyticDB PostgreSQL版 数据。背景信息 云原生数据仓库AnalyticDB PostgreSQL版 是一种大规模并行处理(MPP)数据仓库服务,可提供海量数据在线分析服务。实时计算Flink版 ...

使用内置公开数据集快速体验实时计算Flink版

本文为您介绍如何基于阿里云实时计算Flink版内置的GitHub公开事件样例数据,快速体验实时计算Flink版产品的实时数据分析功能。注意事项 如果您是实时计算Flink版新用户,可以申请该产品的免费资源包,免费试用体验实时计算Flink版产品的...

管理自定义连接器

注意事项 您需要根据社区定义的连接器标准开发您自定义的连接器,才能正确地被实时计算Flink版识别并使用,因此您需要明确连接器Meta文件和声明Factory类。自定义连接器开发详情请参见 User-defined Sources&Sinks。同种类型的连接器仅可以...

自定义监控指标上报渠道

仅上报到Flink控制台外的其他渠道时 实时计算Flink版不再为您开通ARMS或云监控服务,Flink开发控制台不显示监控指标,您可以在对应的指标上报的平台进行查看。在Flink开发控制台已有的告警配置会失效(详情请参见 配置监控告警),后续也...

如何购买Flink半托管集群

问题描述 如何购买Flink半托管集群 问题原因 查看Flink全托管控制台,存在Flink半托管/ACK的选项,但是没有找到创建Flink半托管的入口。解决方案 目前Flink控制台已不再支持创建Flink半托管集群...更多信息 产品形态 适用范围 实时计算Flink版

迁移方案

本文为您介绍阿里云实时计算Blink独享或共享集群(Blink计算引擎和Bayes开发平台)的业务迁移至实时计算Flink全托管(Flink计算引擎VVR和开发平台VVP)时的迁移限制、迁移方案和常见问题。迁移限制 由于Blink作业的State和Flink的State无法...

项目空间授权

角色支持的功能 实时计算Flink版支持添加阿里云账号、RAM用户、RAM角色账号扮演的阿里云主账号为成员,并对添加的成员绑定owner、editor或viewer角色。不同角色可以使用的功能差异如下表所示。功能 owner editor viewer 查看作业列表 Y Y Y...

资源调整

实时计算Flink版支持对工作空间和项目空间的资源进行调整。您可以创建多个项目空间,为每个项目空间分配单独的资源和权限,通过项目空间实现资源和权限的完全隔离。本文为您介绍如何进行工作空间和项目空间的资源调整。注意事项 当RAM用户...

Flink Python作业快速入门

本文带您快速体验Flink Python流作业和批作业的创建、部署和启动,以了解实时计算Flink版Python作业的操作流程。前提条件 如果您使用RAM用户或RAM角色等身份访问,需要确认已具有Flink控制台相关权限,详情请参见 权限管理。已创建Flink...

API概览

本产品(实时计算 Flink版/2022-07-18)的OpenAPI采用 ROA 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求...

企业级状态后端存储介绍

GeminiStateBackend是一款面向流计算场景的KV存储引擎,作为实时计算Flink版产品的默认状态存储后端(StateBackend)。本文为您介绍企业级状态后端存储GeminiStateBackend的核心设计,以及其与RocksDBStateBackend的性能对比情况。整体介绍...

按量付费

按量付费是一种后付费的计费模式,无需您提前购买大量资源,系统会根据您工作空间实际的资源使用量进行结算。本文将为您介绍按量付费的计费规则、不同地域的单价以及停止计费的相关信息。...开通工作空间操作,请参见 开通实时计算Flink版

Python作业开发

本文为您介绍Flink Python API作业开发的背景信息、使用限制、开发方法、调试方法和连接器使用等。背景信息 Flink Python作业需要您在本地完成...实时计算Flink版还支持运行SQL和DataStream作业,开发方法请参见 SQL作业开发 和 JAR作业开发。

基于Flink+Hologres搭建实时数仓

本文介绍如何通过实时计算Flink版和实时数仓Hologres搭建实时数仓。背景信息 随着社会数字化发展,企业对数据时效性的需求越来越强烈。除传统的面向海量数据加工场景设计的离线场景外,大量业务需要解决面向实时加工、实时存储、实时分析的...

操作指导

本文为您介绍实时计算Flink版的操作指导方面的常见问题,包括控制台操作、网络连通性和JAB包等问题。控制台操作 登录实时计算控制台提示当前账号缺少权限 如何在OSS控制台上传JAR包?如何配置作业运行参数?如何开启GC日志?如何查找引发告...

Flink SQL作业快速入门

已创建Flink工作空间,详情请参见 开通实时计算Flink版。步骤一:创建作业 进入SQL作业创建页面。登录 实时计算控制台。单击目标工作空间 操作 列下的 控制台。在左侧导航栏,单击 SQL开发。单击 新建。单击 空白的流作业草稿。Flink也为您...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
实时计算 Flink版 云数据库 RDS 轻量应用服务器 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用