实时计算场景优化
本文为您介绍在E-MapReduce（简称EMR）上使用HDFS进行实时计算场景化配置的一些建议，以便优化HDFS的稳定性。调整DataNode Xceiver连接数 背景：通常实时计算框架会打开较多的HDFS文件写入流（Stream），方便不断地向HDFS写入新的数据。...
实时计算Flink版应用场景
相关文档 什么是阿里云实时计算Flink版 应用场景 开通Flink全托管
实时计算Flink版技术场景
相关文档 什么是阿里云实时计算Flink版 功能与优势 应用场景 开通Flink全托管
基于Flink的资讯场景实时数仓
本文介绍如何针对资讯聚合类业务场景搭建基于 云消息队列 Kafka 版 和实时计算Flink的实时数仓。场景描述 本文首先介绍什么是实时数仓以及相关技术架构，接着介绍资讯聚合类业务的典型场景及其业务目标，并据此设计了相应的技术架构。然后...
应用场景
技术领域 从技术领域的角度，实时计算Flink版主要用于以下场景：实时ETL和数据流 实时ETL和数据流的目的是实时地把数据从A点投递到B点。在投递的过程中可能添加数据清洗和集成的工作，例如实时构建搜索系统的索引、实时数仓中的ETL过程等。...
分场景排错指引
本文为您介绍实时计算Flink版分场景排错指引方面的常见问题，包括权限、运维和数据异常等问题。权限 不小心删除了角色或者变更了授权策略，导致Flink全托管服务不可用怎么办？运维 JobManager没有运行起来，如何快速定位问题？Python作业，...
实时计算Flink版行业案例
相关文档 什么是阿里云实时计算Flink版 应用场景 开通Flink全托管
实时推理场景
实时推理场景基本信息 容器支持 函数计算GPU场景下，当前仅支持以Custom Container（自定义容器运行环境）进行交付。关于Custom Container的使用详情，请参见 Custom Container简介。Custom Container同时支持Web Server模式与非Web Server...
基于Flink的实时大数据应用Demo
相关文档 什么是阿里云实时计算Flink版 应用场景 实时数仓Hologres使用流程
实时推理场景
实时推理场景基本信息 容器支持 函数计算GPU场景下，当前仅支持以Custom Container（自定义容器运行环境）进行交付。关于Custom Container的使用详情，请参见 Custom Container简介。Custom Container同时支持Web Server模式与非Web Server...
基本概念
本文汇总使用实时计算Flink版过程中涉及的基本概念，方便您查询和了解相关概念。层次结构 您可以了解实时计算Flink版产品基本概念的层次结构，为后期作业开发、作业部署、作业运维和安全管理等操作提供思路。实时计算Flink版产品基本概念的...
实时计算Flink版技术原理
相关文档 什么是阿里云实时计算Flink版 功能与优势 基本概念 开通Flink全托管
技术支持
关于阿里云实时计算Flink版产品和服务的相关问题，您可以通过以下渠道寻求支持和解决。支持范围 类别 详情 支持的服务 负责实时计算控制台的使用、咨询服务、稳定性问题和产品缺陷问题处理。实时计算控制台功能主要包括：工作空间购买流程 ...
Quick BI如何实现已知人员入职时间，计算工龄的场景？
概述 本文主要介绍已知人员入职时间，计算工龄的场景。详细信息 Quick BI如何实现已知人员入职时间，计算工龄的场景？介绍如下：在数据集编辑界面，新建计算字段，写入以下逻辑即可：DATEDIFF(NOW(),[入职时间字段])/365 上述举例是根据...
什么是阿里云实时计算Flink版
相关文档 什么是阿里云实时计算Flink版
产品形态
在您购买实时计算Flink版服务前，需要先了解实时计算Flink版的产品形态及特点，再根据业务选择合适的实例。本文为您介绍实时计算Flink版的产品形态区别、发布状态及选型建议。形态区别 产品形态 部署形态 计算引擎 开发平台 Flink全托管 ...
SLB替换方案上线
为了给您提供更好的体验和节约成本，2023年9月8日起实时计算Flink版SLB替换方案分地域逐步上线，预计9月11日全地域完成替换。该替换方案旨在提供更高效的网络连接，以取代原先的负载均衡SLB服务。您新购实时计算Flink版时，无需再单独开通...
2022年及之前公告
本文为您介绍实时计算Flink版2022年及之前产品公告，包括平台升级、API版本升级等。2022年9月19日，API版本升级公告 2022年9月19日，我们对实时计算Flink版API版本进行了升级。后续将默认使用新的API版本（V2版本）为您服务。相较于V1版本...
通过实时计算Flink读写云原生数据仓库AnalyticDB ...
通过实时计算Flink版写入数据到AnalyticDB PostgreSQL版 具体操作，请参见 通过实时计算Flink版写入数据到云原生数据仓库AnalyticDB PostgreSQL版。通过实时计算Flink版读取AnalyticDB PostgreSQL版数据 具体操作，请参见 通过实时计算...
流式ETL
实时计算场景：对业务侧产生的流数据实时清洗处理，形成特征值、标签支持在线业务计算模型（画像、风控、推荐等）或实时大屏等流计算场景。优惠活动 目前ETL功能处于公测阶段，每个账号可以免费创建两个ETL实例，且每个实例在公测期间均...
什么是ETL
实时计算场景：对业务侧产生的流数据实时清洗处理，形成特征值、标签支持在线业务计算模型（画像、风控、推荐等）或实时大屏等流计算场景。优惠活动 目前ETL功能处于灰度公测阶段，仅部分用户可以使用。每个账号可以免费创建两个ETL实例，...
授权信息
本文为您介绍 实时计算 Flink版（RealtimeCompute）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。实时计算 Flink版（RealtimeCompute）的RAM代码（RamCode）为 stream，支持的授权粒度为 RESOURCE。权限策略...
社区版CDC
本文为您介绍如何在阿里云实时计算Flink版中使用社区版CDC（Change Data Capture）连接器，以及更改连接器名称。重要 社区版CDC连接器是遵循Apache 2.0开源协议的社区开源项目，与阿里云实时计算Flink版产品提供的商业版连接器在服务支持及...
概述
技术领域 从技术领域的角度，Flink主要用于以下场景：实时ETL（Extract-transform-load）和数据流 实时ETL和数据流的目的是实时地把数据从A点投递到B点。在投递的过程中可能添加数据清洗和集成的工作，例如实时构建搜索系统的索引和实时数...
如何关闭对实时计算Flink版的监控？
若您不再需要对实时计算Flink版进行监控，您可以按照以下步骤卸载实时计算Flink版。登录 ARMS控制台。在左侧导航栏选择 Prometheus监控>Prometheus实例列表，进入可观测监控 Prometheus 版的实例列表页面。单击 实例类型 为 Prometheus for...
授权信息
本文为您介绍 实时计算 Flink版（RealtimeCompute）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。实时计算 Flink版（RealtimeCompute）的RAM代码（RamCode）为 stream，支持的授权粒度为 RESOURCE。权限策略...
地域及可用区
本文为您介绍阿里云地域和可用区的概念、选择指导以及阿里云实时计算Flink版支持的地域及可用区列表。背景信息 地域（Region）：指数据中心所在的地理区域，通常按照数据中心所在的城市划分。例如，华北2（北京）地域表示数据中心所在的...
准实时推理场景
本文介绍什么是准实时推理场景，以及如何使用GPU按量实例，以及如何基于GPU按量实例构建使用成本较低的准实时推理服务。场景介绍 在准实时推理应用场景中，工作负载具有以下一个或多个特征。调用稀疏 日均调用几次到几万次，日均GPU实际...
设备数据存储和计算实践
面临的挑战 在不同的数据⽣命周期中，您需要采⽤不同的技术⽅案去存储和计算是设备数据，在不同的业务场景中，以下是较为典型的选型模式：场景 说明 监控运维场景 数据存储在RocketMQ等流数据存储产品中，并使⽤实时计算Flink等流计算框架...
使用场景
ACM 为大数据实时计算场景的应用带来以下好处：应用计算参数动态配置，动态生效，生效时间快，性能影响低。企业级互联网架构下的异地多活场景 异地多活是企业级互联网架构中的一种高级容灾架构。相对于传统容灾架构，有业务恢复时间短、...
如何关闭对实时计算Flink版的监控？
若您不再需要对实时计算Flink版进行监控，您可以按照以下步骤卸载实时计算Flink版。登录 Prometheus控制台。在左侧导航栏单击 实例列表，进入可观测监控 Prometheus 版的实例列表页面。单击 实例类型 为 Prometheus for Flink Serverless ...
查看账单
您可以在阿里云用户中心查看实时计算Flink版的费用情况。操作步骤 登录 阿里云控制台。在顶部菜单栏单击 费用，进入用户中心。在左侧导航栏，选择 账单管理>账单详情。根据需要查看消费情况或导出账单。您可以 在 明细账单 页签，消费类型 ...
本地运行和调试包含连接器的作业
本文为您介绍如何在开发者本地环境中运行和调试包含阿里云实时计算Flink版连接器的作业，以便快速验证代码的正确性，快速定位和解决问题，并节省云上成本。背景信息 当您在Inteillij IDEA中运行和调试Flink作业，如果其包含了阿里云实时...
2024-01-04版本
本文为您介绍2024年01月04日发布的实时计算Flink版的重大功能变更和主要缺陷修复。重要 本次升级计划在全网分步骤完成灰度，具体升级计划，请关注 实时计算控制台 页面右侧的最新公告。如果您不能使用相关新功能，说明您的账号暂未完成灰度...
网络连通性
如果源端或目标端任意一个与阿里云实时计算Flink版不在同一VPC下，会导致源端和目标端网络不通，数据无法读写。因此，如果您遇到数据无法读写的情况时，可以按照以下步骤排查是否为网络问题：检查上游存储和Flink全托管之间网络是否连通。...
2022-11-09版本
Apache Flink社区于Flink 1.16.0和1.15.3版本进行了修复，阿里云实时计算Flink版已经在VVR-6.0.2及以上版本修复。但是鉴于此缺陷会导致作业运行可用性存在潜在的重大风险，我们为云上客户专属进行了低版本的修复，并将此Patch放入本次发布...
管理自定义Catalog
说明 支持使用其他服务的HTTP路径，需要该服务和实时计算Flink版在同一VPC下或者先打通实时计算Flink版和目标服务的公网网络链接后使用公网地址。详情请参见 Flink全托管集群如何访问公网？单击 下一步。确认Properties信息后，单击 确定。...
生命周期策略
为了更好地服务于用户，实时计算Flink版构建了生命周期管理体系，明确了产品和引擎版本生命周期策略。通过引入新产品和新版本，希望能够更好地满足您丰富的实时业务需求并高效稳定地保证业务运行结果。涉及范围 本策略涉及的范围包括阿里云...
2023-12-07版本
管理资源队列 任务编排（公测）通过可视化的操作界面轻松地编排批作业运行的顺序，调度批作业任务的运行，高效构建数据仓库，在实时计算Flink版平台实现开发、调度、部署和运维一体化。任务编排（公测）查询脚本 可以在查询脚本中通过DDL、...
- 产品推荐
- 这些文档可能帮助您