移动端概述
帮助分析师多维度分析数据，从异常数据层层筛查分析，找到根本原因，辅助决策。点击选中配置了交互分析的图表组件，底部会出现弹窗，显示已选择的维值以及当前维度上配置的交互式分析种类；滑动仪表板页面时，底部弹窗消失。如下图：跳转 ...
CREATE MODEL
nsigma 达摩院自研算法，原理简单，便于分析异常原因。详细信息，请参见 时序异常检测。ttest 达摩院自研算法，适用于识别一个时间窗口内时序指标是否存在因均值变化而发生的异常。详细信息，请参见 时序异常检测。指定列的预处理操作...
全链路监控和审计
也可以基于某些指标定制实时的监测与告警，当关键业务出现异常时可通过多种途径进行告警通知。SQL审计与分析功能默认关闭，您可以在 PolarDB-X 控制台上随时开启。审计日志默认保存45天。审计与分析功能本身免费，但日志服务会对存储空间、...
SQL优化技术
实现架构 DAS自动SQL优化是一个基于数据驱动的闭环流程，上图简单描述了整个流程：异常事件：异常事件是触发自动SQL优化的引信，异常事件由DAS事件中心统一管理，异常事件产生自实时异常检测、离线分析、workload检测、告警系统等等。...
性能优化与诊断简介
空间分析 查看数据库实例的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间碎片、空间异常诊断等，帮助您及时发现数据库中的空间异常，避免影响数据库稳定性。参数诊断 对数据库实例的参数进行诊断，提供静态参数...
数据流运维
您可以在数据流运维中心查看数据流的发布状态、发布详情、运行记录等。登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据集成>离线集成。单击数据流名称，进入数据流详情页面。单击画布右上方 前往运维。在数据流运维...
数据集成概述
数据传输：数据集成仅完成数据同步（传输），本身不提供数据流的消费方式。数据一致性：数据集成同步仅支持at least once，不支持exact once，即不能保证数据不重复，只能依赖主键+目的端能力来保证。说明 同步任务源端和目标端字段类型...
发布数据流
完成数据流的配置或变更后，您需要通过发布操作将最新的数据流发布，有效避免部分变更未经确认被直接发布。登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据集成>离线集成。单击数据流名称，进入数据流详情页面。可选：...
部署与运维
也可以基于某些指标定制实时的监测与告警，当关键业务出现异常时可通过多种途径通知告警。控制台上可以查看当前实例会话，也可以选择终止会话。会话统计页面可查看按客户端统计、按namespace统计等的聚合统计信息。10秒SQL分析功能可以在10...
应用场景
阿里云提供了非常完善的BI体系，DTS可以帮助您将自建数据库实时同步至阿里云的BI存储系统（例如MaxCompute、分析型数据库或流计算等），助力您在阿里云上快速搭建满足自身业务的定制化BI系统。数据实时分析 传输方式：数据订阅 数据分析在...
使用DMS进行数据归档
注意事项 若在数据归档过程中选择了自动清理源库表数据，请注意源库表空间的预留情况，避免由于空间不足导致归档过程中出现异常。支持存储弹性模式和Serverless模式两种实例资源类型的 AnalyticDB PostgreSQL版。推荐您使用资源类型为...
文档修订记录
订阅成功后，账单数据会定时同步至MaxCompute，您可使用DataWorks的数据分析功能查询并分析账单数据，将分析结果生成可视化图表卡片及报告，同时，也可将您的阿里云消费分析报告分享给其他用户。账单数据订阅及查询分析 2024.2.21 新增功能...
播放异常自主排查
导致视频播放异常的原因有多种，定位问题时，可首先分析异常产生是否呈现一定的分布特征。若异常产生具有明显分布特征时，可按下述表格中归纳出来的可能原因进行排查定位问题；若异常产生无明显分布特征时，则可以按端（终端设备）、流（音...
产品优势
DBS通过使用阿里实时数据流技术，读取数据库日志并进行实时解析，然后备份至云端存储上，实现对数据库的增量备份。通常，DBS可以将增量备份的延迟控制在秒级别以内，根据实际网络环境不同，延迟时长也会不同。并行备份：全程无锁备份、多...
时序引擎版本说明
功能优化 修复TSQL条件中出现BOOLEAN数据类型的数据时可能出现异常的问题。3.4.17（稳定版本）发布日期 类型 说明 2022年06月17日 新特性 支持设置写入的最大时间（即当前时间和偏移时间），超过偏移时间后写入的数据会被丢掉。功能优化 ...
迁移失败常见原因及解决方案
原因分析 出现如上报错存在如下几种情况：VPC中迁移所用的弹性网卡（ENI）的IP无法访问该NAS。数据地址中填写的Prefix无效。如为ECS共享文件夹，NFS服务未开启或共享文件夹未生效。解决方案 确认NAS是否设置了访问权限或安全组。由于迁移...
工作原理
下探分析用于多维时序数据的根因定位，当监控的时序指标出现异常时，分析这个时序指标的各个维度，检测是哪个维度或者哪些维度的组合导致了指标异常。通过指标的各个维度进行根因定位，便于运维人员在服务异常时快速定位异常根因。例如网站...
设计阶段
完成需求阶段的工作后，数据产品经理会产出最终版本的产品...数据流设计 ETL过程中，数据流向有如下限制：数据流向仅支持由低到高，即ODS->DWD->DWS->ADS。数据不能跨层引用、逆向引用。DWS层不同集市的数据不能相互引用，必须沉淀到DWD层。
批量创建质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。说明 仅支持Dataphin数据表和全域数据表配置异常归档。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档...
批量创建质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。说明 仅支持Dataphin数据表和全域数据表配置异常归档。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档...
运维中心概述
限流配置：限流规则配置是当计算引擎出现性能瓶颈、资源分配不足或需控制任务下发时间和顺序等场景时，您可在开发或生产环境配置限流规则，以保障系统的稳定性及控制高优先任务优先分配资源、优先运行，保证数据按序、及时的产出。...
DataWorks按量计费概述
公共调度资源组、公共数据集成资源组、公共数据服务资源组 为共享资源池，高峰期可能出现实例等待无法调起、同步任务线程数分配不足、API调用执行异常及限流 的情况。如果需要保证并发任务运行，请购买 独享调度资源组，独享数据集成资源组...
诊断报告
当RDS MySQL实例出现性能问题，或者进行日常巡检时，您可以通过数据库自治服务DAS的诊断报告功能，针对指定时间段的实例运行状况发起诊断，帮助您从慢日志、表空间、性能趋势等多方面评估实例的健康状况，快速定位实例的异常情况。...
为什么要升级到MongoDB的新版本
简要描述：在分片集群实例中，若未及时清理孤立文档，可能会导致在迁移数据时出现数据不一致的问题。推荐版本：4.4及以上版本。推荐理由：当一个Chunk成功迁移到新的分片后，源分片中的该Chunk会延期删除。孤立文档通常是因为迁移过程中断...
会话管理
当数据库出现性能问题或异常操作时，通常需要结合数据库的会话信息，快速定位和解决数据库的问题。数据库自治服务DAS（Database Autonomy Service）的实例会话功能，支持实时查看目标实例的活跃会话、异常会话、会话访问来源和SQL语句等...
数据库代理发布记录
修复开启行列自动引流时，某些场景下可能出现连接数据库的部分连接长时间阻塞的问题。修复会话级连接池使用 SET OPTION 可能出错的问题。修复使用STMT_SEND_LONG_DATA时，某些场景下可能导致连接阻塞的问题。修复连接保持中的某些连接未...
CREATE STREAM
创建一张数据流表，表示一个无界的事件集合。数据流表仅支持新增数据，不支持更新数据和删除数据。数据流表中的最小单元为Record，Record有预定义的Schema。数据流表的物理数据存储在流存储的某个指定的Topic上，具体的存储格式可以在With...
DAS Auto Scaling弹性能力
从上图可以看出，该实例在07:10突然出现异常流量，导致CPU利用率和活跃会话飙升，CPU利用率上升至80%以上，资源相对紧张。经过对实例上的读写流量进行分析发现，当前流量中以读流量为主，DAS Auto Scaling算法判断通过增加2个只读节点缓解...
功能特性
EMR on ECS 功能集 功能 功能描述 参考文档 集群管理 创建集群 您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。创建集群 释放集群 在完成EMR集群任务后及时释放集群，可以释放资源...
运维阶段
运维人员或开发人员通过监控规则捕获、自主发现或其它方法获取关于数据产出时效性、数据准确性等指标的异常情况，并进行影响分析。异常情况包括但不限于：任务运行失败。任务运行时间过长。产出表中出现脏数据。开发人员根据影响分析的结果...
存储资源
数据库实例异常 是指数据库系统在运行过程中出现异常情况，导致数据库无法正常工作或提供服务的状态。可能原因包含数据库服务进程异常退出、数据库节点宕机、数据库网络异常等，常见的容错策略如下：自动重启：当数据库实例异常终止或崩溃...
RDS术语
DTS Data Transmission Service，数据传输服务，是阿里云提供的实时数据流服务，支持RDBMS、NoSQL、OLAP等，集数据迁移/订阅/同步于一体，为您提供稳定安全的传输链路。更多信息，请参见 什么是数据传输服务DTS。地域 地域指的是您购买的...
RDS术语
DTS Data Transmission Service，数据传输服务，是阿里云提供的实时数据流服务，支持RDBMS、NoSQL、OLAP等，集数据迁移/订阅/同步于一体，为您提供稳定安全的传输链路。更多信息，请参见 什么是数据传输服务DTS。地域 地域指的是您购买的...
使用gig流控插件
当节点服务质量出现问题（一般体现为查询延迟飙升或错误率上升）时，插件能够通过PID算法实时收集分析服务节点指标，快速做出反应，屏蔽异常节点，实现故障后的秒级切流。当新节点上线加入集群时，为避免业务流量直接输入到服务能力未达标...
DeleteDataStream
调用DeleteDataStream，删除数据流。仅适用于日志增强版实例。说明 删除数据流的同时会删除其对应的后备索引，请谨慎操作。索引模板存在关联的数据流时，需要先删除关联该索引模板的数据流，才能删除索引模板。在数据流列表页需要查看数据...
实例会话
当您的实例突然出现CPU飙升、活跃会话升高或响应时间飙升的告警时，PolarDB-X 提供10秒SQL分析的功能帮助您对10秒内的实时SQL进行分析。会话管理 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。在 实例列表 页，单击 ...
CreateDataStream
调用CreateDataStream，创建数据流。仅适用于日志增强版实例。说明 您创建的数据流名称需要与索引模板中的索引模式一一对应，且该索引模板已开启数据流。例如：索引模板中的索引模式为ds-*，则对应的数据流名称应该为ds-。调试 您可以在...
查看与分析API调用日志（公测）
数据服务提供日志分析功能，您可以使用日志分析功能对调用请求进行分析，当调用请求出现异常时，智能分析能帮助您快速定位问题，并给出诊断结果和建议。使用限制 仅DataWorks专业版及以上版本，支持使用智能分析功能。您目前可以免费体验，...
执行补数据并查看补数据实例（新版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
PolarDB MySQL版CPU使用率高
另有一种情况是前端连接风暴导致集群流量瞬间堆积，此时流量属于异常流量，一般出现在流量数据被爬虫拉取数据的场景下。此时可以通过SQL限流的方式进行请求拒绝，具体操作请参见 会话管理。内核配置不合理 自建MySQL的参数是通用场景下的...
- 产品推荐
- 这些文档可能帮助您