实时数据API

本文为您介绍什么是实时数据API,以及实时数据API的作用。实时数据业务流程。在实时数据业务场景中,最常见的链路是将实时采集的数据,通过实时计算初步清洗,实时写入数据至数据库,再对接BI工具实现数据的可视化分析。数据处理流程如下图...

数据同步概述

无论是实时数据,还是离线数据,同步至Hologres之后就能使用Hologres对数据进行多维分析,例如通过JDBC或者ODBC对数据进行查询、分析、监控,然后直接承接上游的业务例如大屏、报表、应用等可视化展现,实现数据从写入到服务分析一体化。...

实时同步数据库的数据至Hologres

背景信息 Hologres是实时交互式分析产品,与大数据生态无缝打通,深度集成智能研发平台DataWorks,支持高并发和低延时地查询分析数据。您可以通过DataWorks数据集成同步将数据库中的数据实时同步至Hologres,再进行高并发低延时的查询分析...

使用标签对RDS实例进行分组授权

说明 RAM用户登录RDS控制台后,控制台会提示“您没有指定资源的操作权限,请先对资源进行授权操作。请关掉该错误提示。出现该错误提示的原因是控制台默认展示所有资源,而当前RAM用户并没有查看所有资源的权限,所以会报错。

实时UV精确去重(Flink+Hologres)

由于是实时数据,在Hologres中该表为行存表,以提高Flink维表实时JOIN的QPS。需要开启相应GUC使用优化的执行引擎对包含serial字段的表进行写入,详情请参见 Fixed Plan加速SQL执行。开启GUC,支持含有Serial类型列的Fixed Plan写入 alter ...

管理域名

实时计算控制台上,您可以管理上下游服务的域名。本文为您介绍如何在实时计算控制台上新增域名、修改域名和删除域名。使用限制 填写域名时,不支持填写大写字符。单个工作空间最多只能设置50个合法域名。当工作空间状态为运行中时,才...

权限管理

权限概述 实时计算Flink版支持阿里云账号、RAM用户、RAM角色、资源目录成员方式登录并访问实时计算控制台,以及进行作业开发和运维。无论您采用何种方式登录(阿里云账号访问自己所拥有的资源除外),均需要具有相应的权限才能正常进行操作...

按登录方式授权

实时计算Flink版支持阿里云账号、阿里云RAM用户、阿里云RAM角色、资源目录成员方式登录并访问实时计算控制台,以及进行作业开发和运维。不同登录方式下需要被授权的主体(身份或账号)可能不同,本文通过示例为您介绍不同登录方式下,访问...

管理作业版本

登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在左侧导航栏,单击 SQL开发。双击目标作业名称。在页面右侧,单击 版本信息。在目标版本号对应的 操作 列,单击 对比。在左侧 选择版本 中选择目标对比...

废弃或恢复监控指标

注意事项 使用RAM用户、RAM角色等身份访问时,需要具有访问应用实时监控服务权限,详情请参见 访问控制概述。关闭/恢复监控告警 重要 卸载工作空间对应的监控告警Prometheus实例,会停止采集对应工作空间的监控数据,并导致作业的监控数据...

SLB替换方案上线

提供更好的用户体验:替换方案将为您提供更高效和稳定的网络连接,使您在使用实时计算控制台时具有更流畅的操作体验。节约您的使用成本:通过使用该替换方案,您可以省去开通SLB服务产生的按量计费费用,从而节约您的使用成本。注意事项 ...

查看启动和运行日志

查看启动日志 登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在左侧导航栏上,选择 作业运维。单击目标作业名称。单击 作业探查。在左侧 启动日志 页签,查看启动日志。查看运行日志 在作业探查页面...

续费说明

在创建工作空间页面开通自动续费 登录 实时计算控制台,您可以在创建工作空间页面开通自动续费功能,如下图所示。更多创建Flink全托管工作空间的信息,请参见 开通Flink全托管。在续费管理页面开通自动续费 登录 实时计算控制台。在顶部...

技术支持

实时计算控制台功能主要包括:工作空间购买流程 工作空间创建流程 工作空间扩缩容流程 创建与管理项目空间流程 负责实时计算Flink版产品功能使用咨询服务、产品缺陷问题处理、集群稳定性问题处理。协助排查实时计算Flink版产品依赖的其他...

查看运行异常日志

查看Job Manager异常 登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在左侧导航栏上,单击 作业运维 后,单击目标作业名称。在 作业探查 页签,选择左侧的 异常信息 页签后,查看Job Manager异常信息。...

查看与修改作业运行状态

查看作业运行状态 登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在左侧导航栏上,选择 作业运维。查看目标作业名称 状态 列下的作业运行状态信息。作业的运行状态及含义详情如下表所示。类别 状态 ...

管理资源队列

登录 实时计算控制台。在左侧导航栏,单击 队列管理。单击 添加队列。填写 队列名称 和 资源量。配置 说明 队列名称 队列名称不可重复,只允许小写字母、数字和中划线(-)且长度不超过32位。说明 资源队列添加成功后,不可修改资源 队列...

查看运行事件

操作步骤 登录 实时计算控制台。单击目标工作空间 操作 列下的 控制台。在 作业运维 页面,单击目标作业名称。在 运行事件 页签,查看作业运行事件详情。运行事件 页面默认展示事件发生的 时间、信息 和 操作 三部分信息,其中具体内容如下...

管理工作流实例和节点实例

查看工作流实例详情 登录 实时计算控制台。单击目标工作空间 操作 列下的 控制台。在左侧导航栏,单击 任务编排。单击目标工作流名称,进入工作流实例页面。在 工作流实例列表与详情 页签,您可以查看对应的所有工作流实例,以及各工作流...

2023-12-07版本

具体升级计划,请关注 实时计算控制台 页面右侧的最新公告。概述 2023年12月7日Flink全托管平台进行版本升级,包含资源队列、任务编排(公测中)、查询脚本等功能。结合已经发布支持的Paimon连接器能力,您可以基于平台构建较完整的...

按量付费转包年包月

操作步骤 登录 实时计算控制台。在 Flink全托管 页签,目标工作空间 操作 列下,选择 更多>转为包年包月模式。在 转为包年包月模式 页面,完成计费方式转换的相关配置。配置项 说明 项目资源分配 分配给具体项目的资源数。购买时长 购买以...

作业停止

登录 实时计算控制台。在 Flink全托管 页签,单击对应工作空间 操作 列下的 控制台。在 作业运维 页面,单击目标作业 操作 列下的 停止。更多设置中的选项说明如下:停止前创建一次快照:如果您需要在停止前创建一次快照,则需要先单击 更...

查询脚本

操作步骤 登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在 SQL开发 页面,单击 查询脚本 页签。单击,新建查询脚本。填写SQL代码。支持Call命令和DDL、DQL、DML语法。默认使用批模式,您可以使用如下...

修改虚拟交换机

操作步骤 登录 实时计算控制台。单击目标工作空间 操作 列下的 更多>修改虚拟交换机。选择目标可用区。选中目标虚拟交换机。说明 修改后的虚拟交换机必须与Flink在同一个VPC同一个可用区。如果列表中没有您需要的交换机,您可以单击列表...

实时发布流程

使用流程 以下图表展示了实时发布版本升级包、热修复包、离线包的流程:控制台管理 您可以在实时发布控制台完成以下操作:版本升级包>发布管理:管理发布客户端新版本的配置。热修复包>热修复管理:在不发版本的情况下直接修复线上缺陷。离...

管理自定义函数(UDF)

Flink开发控制台会解析自定义函数文件中是否使用了Flink UDF、UDAF和UDTF接口的类,并自动提取类名,填充到Function Name字段中。注册成功后,您可以在左侧 函数 列表看到所有注册成功的UDF,注册成功的UDF左侧会有黄色字体的fx标识。说明 ...

网络连通性

操作步骤如下:在实时计算Flink版控制台的 工作空间详情 中获取专有网络ID。在专有网络控制台,单击目标专有网络ID。在 资源管理 里,单击公网NAT网关数字。说明 如果公网NAT网关数字为0,需要您创建公网NAT网关,具体操作详情请参见 创建...

包年包月转按量付费

操作步骤 登录 实时计算控制台。在 Flink全托管 页签,目标工作空间 操作 列下,选择 更多>转为按量付费模式。在 转为按量付费模式 页面,查看转换须知和退款信息。阅读《Flink全托管服务等级协议》后,选中 我已阅读并同意。单击 确定 并...

作业智能诊断

登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在左侧导航栏上,单击 SQL开发。编写SQL后,单击 深度检查。深度检查能够检查作业的SQL语义、网络连通性以及作业使用的表的元数据信息。同时,您可以单击...

同城高可用

停止跨可用区 计费 登录 实时计算控制台。单击目标工作空间下所有跨可用区项目空间右侧 操作 列下的 删除 后,单击 确定。重要 如果项目空间中存在运行中的作业时,则无法删除。项目空间删除后,项目空间中的作业及数据将不能恢复,请谨慎...

2024-03-13版本

重要 本次升级计划在全网分步骤完成灰度,具体升级计划,请关注 实时计算控制台 页面右侧的最新公告。如果您不能使用相关新功能,说明您的账号暂未完成灰度。如果您需要尽快升级,请 提交工单 告知我们,我们将结合实际情况进行安排。主要...

修改运行作业日志级别

操作步骤 登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在左侧导航栏上,选择 作业运维。单击目标作业名称。单击 作业探查。在左侧 运行日志 页签,选择正在运行的作业实例。修改Job Manager或Task ...

管理自定义Catalog

登录 实时计算控制台。单击目标工作空间 操作 列下的 控制台。在左侧导航栏,单击 元数据管理。单击 创建Catalog,在 自定义Catalog 页签,单击 创建自定义Catalog类型。在 创建自定义Catalog类型 对话框,配置自定义Catalog类型信息。方式...

数仓加速查询

本文以GitHub公开事件数据为例,为您介绍使用Hologres加速查询MaxCompute,并对接BI分析工具(本文以DataV为例),实现实时分析离线数据的通用架构与核心步骤。示例架构 搭建离线数仓时,Hologres可直接读取离线数仓MaxCompute中的数据,并...

数据同步模版

Flink CDC支持数据的实时同步和表结构变更的自动同步。您可以使用数据同步模版帮您快速生成数据同步的Flink SQL作业代码。本文为您介绍如何使用多库多表同步或者分库分表合并模版实现数据同步。背景信息 Flink全托管支持多库多表同步和分库...

代码模板

登录 实时计算控制台。在 Flink全托管 页签,单击对应工作空间 操作 列下的 控制台。在 SQL开发 页面,单击 新建。在 SQL基础模版 页签,双击目标模板名称,或者单击选中目标模板后,在右下角单击 下一步。根据需要,修改 文件名称、存储...

查看历史作业实例日志

在作业探查界面查看 登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在左侧导航栏上,选择 作业运维。单击目标作业名称。单击 作业探查。在左侧 运行日志 页签,单击 作业 右侧的下拉框,选择历史运行...

基本概念

管理元数据 角色(Role)角色是实时计算Flink版安全功能中的概念,可以理解为拥有相同权限的用户的集合。多个用户可以同时存在于一个角色下,一个用户也可以隶属于多个角色。给角色授权后,该角色下的所有用户拥有相同的权限。角色授权 ...

SQL作业开发

登录 实时计算控制台。在 Flink全托管 页签,单击目标工作空间 操作 列下的 控制台。在 SQL开发 页面,单击 新建。单击 空白的流作业草稿。Flink全托管为您提供了丰富的SQL代码模板和数据同步模板,每种模板都为您提供了使用场景、代码示例...

动态扩缩容与参数动态更新

登录 实时计算控制台。单击对应工作空间 操作 列下的 控制台。在 作业运维 页面,单击目标作业名称。在 部署详情 页签,单击 资源配置 或 运行参数配置 区域右侧的 编辑。修改可以被动态更新的参数取值后,单击 保存。单击页面右上角的 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
实时计算 Flink版 应用实时监控服务 数据传输服务 云安全中心 智能语音交互 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用