2023-10-23版本
动态更新作业参数 提供SQL优化建议 SQL作业进行深度检查时，会返回SQL优化建议功能，自动输出SQL问题风险以及对应的优化建议，您可以根据风险以及建议进行SQL语句优化。SQL作业开发 支持标签搜索能力 支持在SQL、JAR或Python作业部署时，...
登录实例
权限策略 当 选择数据库 项选择为新建数据库时，会出现该配置项。您可以根据业务需求为数据库配置对应权限。更多关于权限策略的说明，请参见：SPM SLPM 专家权限模型 通过未登录实例进行登录 您可以在未登录实例列表中，鼠标右键单击目标...
【组件发布】Prometheus Agent发布公告
通常，升级Helm版本不会对您的生产业务造成影响，除非在特殊情况下可能会导致您的监控数据中断，该情况出现的可能性较小。若您在升级过程中遇到任何问题，您可以在钉钉中搜索Prometheus值班号（钉号：aliprometheus），联系产品技术专家...
通过Holo Client读写数据
问题原因：Holo Client将会通过 hg_internal_refresh_meta 函数获取实例中表的元（Meta）信息。如果实例进行了比较频繁的DDL操作，该函数需要等到当前节点元信息版本更新才会返回，导致耗时较高。解决方法：一般情况下该系统SQL的耗时不...
基于Flink+Hologres搭建实时数仓
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
2022-11-09版本
Flink在网络抖动时，FLINK-28265 会导致Serialized CompletedCheckpoint文件被清理，进而在Failover时出现FileNotFound错误，且无法在作业Failover时自动恢复。Apache Flink社区于Flink 1.16.0和1.15.3版本进行了修复，阿里云实时计算Flink...
网络架构升级
为了提高服务质量并满足不断增长的业务需求，我们将对实时计算Flink版网络架构进行重要升级。此次升级旨在优化IP资源的使用效率，加强网络安全隔离措施，并为支持同城高可用CU类型奠定基础，为您带来更加稳健和高效的数据处理体验。您可以...
基于Flink+Hologres搭建实时数仓
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
项目空间授权
注意事项 如果您使用的是通过对扮演RAM角色的阿里云账号进行授权的方式（旧授权方式），RAM角色会出现项目空间无权限访问情况，您需要按照本文操作步骤重新对RAM角色进行授权。新的授权方式直接通过RAM角色ID进行授权。缺少项目空间权限时...
Task快速重启配置
目前，配置Task快速重启后，如果发生作业Failover，将会出现数据丢失或重复。因此请您一定要先请确保您的业务可以允许出现数据的丢失或重复，再配置Task快速重启。启用Task快速重启后，您可以忽略Flink UI页面上显示的Checkpoint一致性语义...
实时数仓 Hologres系统权限策略参考
本文描述实时数仓 Hologres支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM...
退款说明
关于退款规则的详细信息，请参见 退订规则说明、退订资金流向 和 退订常见问题。退款操作 在您确保充分了解退订规则后，您可以按照以下步骤进行退款。进入 实时计算控制台。在目标工作空间 操作 列下，选择 更多>释放资源。在 退订管理 ...
调用链分析
将应用数据上报至 可观测链路 ...接口指标详情 相关文档 为避免在出现问题后被动诊断错误原因，您还可以使用告警功能针对一个接口或全部接口创建告警，即可在出现问题时向运维团队发送通知。如何创建告警，请参见 应用监控告警规则。
查看血缘关系
提升故障排查效率 当数据在处理过程中出现问题时，通过血缘关系，您可以追踪到问题的根源，快速定位和解决故障，避免业务损失和高昂的人力成本。提升数据分析效率 当数据资产变更或者出错的情况下快速定位所影响的线上作业，及时进行处理，...
实时日志查询
重置日志索引字段 查询实时日志时，可能会出现字段变动（例如新增字段或者将某个字段变为索引等），但实时日志分析页面配置并非自动同步。您需要通过以下两种方式手动刷新实时日志索引字段。重要 以下两种方式会将索引恢复到内置索引的最新...
如何通过ChatOps处理告警
使用ChatOps打破信息孤岛 ChatOps能够解决告警处理时信息孤岛问题是因为它将所有关键信息和协作工具集成到一个平台中，使得运维人员可以通过聊天获取所有的信息和上下文，同时在同一个聊天平台上与其他人实时协作和沟通。这种方式可以将...
查看历史作业实例日志
背景信息 如果出现以下情况，则您需要查看历史作业实例的日志：您需要查看、搜索和分析历史作业实例的运行日志（系统默认保留最近5 MB大小的运行日志）。Flink UI无法打开，需要查看Job Manager日志定位问题。本文为您介绍查看历史作业实例...
使用内置公开数据集快速体验实时计算Flink版
本文为您介绍如何基于阿里云实时计算Flink版内置的GitHub公开事件样例数据，快速体验实时计算Flink版产品的实时数据分析功能。注意事项 如果您是实时计算Flink版新用户，可以申请该产品的免费资源包，免费试用体验实时计算Flink版产品的...
使用Hologres和大模型免费定制专属聊天机器人
什么是实时数仓Hologres Hologres是阿里巴巴自主研发的一站式实时数仓引擎（Real-Time Data Warehouse），支持海量数据实时写入、实时更新、实时加工、实时分析…… 语料数据向量化并导入Hologres：运行如下命令将语料数据转化为向量（Text...
Hologres推荐的数仓分层
有实时需求，以分析为主，实时性满足分析时数据在业务场景具备实时含义，不追求数据产生到分析的秒级绝对值，但开发效率优先，推荐分钟级准实时方案，这个方案适合80%以上的实时数仓场景，平衡了时效性与开发效率，适合 实时数仓场景二：...
作业开发问题
问题原因 使用Entry Point Main Arguments传参的时候需要传特殊字符时，例如#$，使用反斜线（\）转义也无法识别，特殊字符出现会被丢弃掉。解决方案 在 其他配置 中添加参数 env.java.opts:Dconfig.disable-inline-comment=true，具体操作...
2022-05-16版本
因此，当作业连续失败时，真正的Root Cause会被后续的堆栈信息淹没。这个版本，我们对此进行了改良，异常日志可以被存储更长时间，同时对异常日志进行了分类，协助您更好的定位到作业的异常原因。查看运行异常日志 内置阿里云文档 作业开发...
全增量同步任务运维
强制重跑 在某些特殊情况下，例如发现源端数据被污染、数据链路出现问题等，您可以单击 操作 列 更多>强制重跑 强制对源端所有表进行全增量初始化操作，将源端数据重新迁移到目标表中，以快速恢复数据。说明 仅Hologres和MaxCompute支持...
实时物化视图（Beta）
物化视图的底层数据与明细表的TTL一致，不可以手动设置物化视图的TTL，否则会出现物化视图数据和明细表数据不一致的情况。支持的聚合函数 物化视图当前支持如下聚合函数。SUM COUNT AVG MIN MAX RB_BUILD_CARDINALITY_AGG（只支持BIGINT，...
实例监控
您可以在 实例监控 页面了解应用实例的请求数、错误数、平均耗时和慢调用等基本信息，以及接收的包数、TCP RTT、重传次数、TCP Drop次数和发送的包数等网络信息。功能入口 登录 ARMS控制台，在左侧导航栏单击 应用监控 eBPF 版>应用列表。...
【产品变更】云拨测升级公告
应用实时监控服务ARMS已于2023年05月上线新版云拨测，依据产品迭代策略，ARMS将于2024年01月25日晚对旧版云拨测功能进行升级。升级影响 原有云拨测定时任务的任务分析报告展示整体重构。原有任务参数配置、拨测点资源消耗、计费模式、API ...
2023-08-21版本
CREATE TABLE AS（CTAS）语句 CREATE DATABASE AS（CDAS）语句 重要缺陷修复 修复MySQL源表读取PolarDB MySQL时出现Filtering update table metadata event:Event{header=EventHeaderV4的问题。修复使用带有条件的窗口TVF时无数据输出的...
数据库分析
调用链分析 调用链分析功能基于已存储的全量链路明细数据，通过自由组合筛选条件与聚合维度进行实时分析，可以满足不同场景的自定义诊断需求。更多信息，请参见 调用链分析。联系我们 如果您在使用应用监控 eBPF 版中有任何问题，请联系...
配置监控告警
创建的告警规则模板会出现在告警规则模板列表中，您可以进行 编辑 或 删除。在ARMS控制台配置 说明 使用RAM用户、RAM角色等身份访问时，需要具有访问应用实时监控服务权限，详情请参见 访问控制概述。登录 实时计算控制台。单击目标工作...
Arthas诊断（新版）
Arthas是诊断Java领域线上问题的利器，利用字节码增强技术，可以在不重启JVM进程的情况下，查看程序的运行情况。前提条件 说明 仅应用监控专家版支持Arthas诊断功能。新开通 EDAS 的账号或15天内未使用旧版Arthas诊断功能的账号仅支持使用...
基于GitHub公开事件数据集的离线实时一体化实践
本文为您介绍如何基于GitHub实时事件数据通过MaxCompute构建离线数仓、通过Flink和Hologres构建实时数仓，然后通过Hologres和MaxCompute分别进行实时与离线数据分析，从而实现实时离线一体化解决方案。背景信息 随着社会数字化发展，企业对...
数据库实时入仓快速入门
通过Flink的全增量自动切换、元信息自动发现、表结构变更自动同步和整库同步等功能，简化了数据实时入仓的链路，使得实时数据同步更加高效便捷。本文介绍如何快速构建一个从MySQL到Hologres的数据同步作业。操作原理与Demo演示 Flink CDC...
实时日志条数
开启实时日志，并成功投递日志后，根据日志投递条数产生计费。计费项名称 计费规则 付费方式 计费周期 实时日志投递条数。开启实时日志，并成功投递日志后，会产生日志投递费。按量后付费。按小时结算，出账会存在3~4个小时的延迟。价格：...
2021年
维护定期回收空间任务 使用ANALYZE收集统计信息 Multi-Master基础架构 实时物化视图 实时物化视图支持INSERT/COPY ON CONFLICT DO UPDATE语法。修复实时物化视图多Master场景不正确刷新的问题。修复实时物化视图不支持复制表的问题。修复...
应用场景
本文将以部门场景和技术领域场景为例，为您介绍实时计算Flink版的大数据是实时化场景。说明 更多场景案例请参见 阿里云实时计算Flink版产品案例和解决方案汇总。背景信息 作为流式计算引擎，Flink可以广泛应用于实时数据处理领域，例如ECS...
MySQL整库同步Kafka
如果存在删除的字段且消息未过期，则会出现一些已经不存在的字段，这样的字段值会为null，该情况无需特殊处理。通过创建临时表的方式使用 这种方式支持用户自定义指定Schema。您可以在Schemas tab页查看并复制表配置的WITH部分。基本格式...
什么是实时日志
在借助 CDN 访问图片、文字或视频资源时，CDN 会产生大量的日志数据，并对这些日志数据进行实时采集。阿里云 CDN 通过与日志服务融合，将采集到的实时日志实时推送至日志服务（简称SLS），并进行日志分析。通过日志的实时分析，您可以快速...
概览
实时数仓Hologres连接器 1.15 6.0.5 1.3.x 通用：作业启动时，会在TasknManager日志中打印所有参数信息，方便排查问题。CTAS/CDAS：支持字段类型宽容模式，使用此模式上游发生数据类型修改事件时，只要所修改类型与原类型的归一化类型相同...
应用概述
网络问题、应用运行异常或者应用无外部流量访问时均会引发该状态。功能概览 功能 功能说明 应用概览 显示应用的请求数、错误数、耗时、实例数等信息。应用拓扑 显示应用内部服务的调用关系。提供服务 了解应用提供的服务详情，包括接口调用...
云消息队列 RocketMQ 版
重要 由于阿里云网络安全策略动态变化，实时计算连接公网服务MQ时可能会出现网络连接问题，推荐您使用内网服务MQ。内网服务无法跨域访问。例如，您所购买的实时计算服务的地域为华东1，但是购买的RocketMQ服务的地域为华东2（上海），则...
- 产品推荐
- 这些文档可能帮助您