基础流场
本文介绍图层栅格数据选择的流符号为基础流场时的参数配置。前提条件 已登录DataV-Atlas管理控制台。已进入项目编辑页面。样式 基础 可见缩放等级：级别表示地图的缩放层级，地图的缩放层级在设置范围内数据点将显示，范围外将隐藏。范围为...
过载保护
当前只有在所有只读节点异常（宕机或者与主库的复制中断）的情况下，才会触发过载保护，其它场景暂时未支持。使用说明 在控制台基本信息的集群地址区域，单击 编辑配置，打开 编辑地址配置 页面，可开启过载保护。基于漏桶原理，当代理端...
持续查询
本文介绍如何在流引擎中持续查询数据。背景信息 持续查询（Continuous Query）是基于流表的实时计算，它的基本处理模型如下图所示。Source表示数据源头的流表，Operator表示计算逻辑，Sink表示存储计算结果的结果表。每当源头的流表有数据...
可用性与可靠性
异常时自动切换节点，宕机时自恢复来保证极致的可用性，还可以通过备份恢复来进行数据恢复。主备多副本与云盘三副本 AnalyticDB PostgreSQL版 是基于MPP架构的分布式数据库，对于所有的分布式系统来说，在通过分布式来增强性能的同时，也...
导入概述
Stream Load适用于导入本地文件，或通过程序导入数据流中的数据，详细信息请参见 Stream Load。同步导入 Routine Load Routine Load（例行导入）提供了一种自动从指定数据源进行数据导入的功能。您可以通过MySQL协议提交例行导入作业，生成...
导入概述
Stream Load适用于导入本地文件，或通过程序导入数据流中的数据，详细信息请参见 Stream Load。同步导入 Routine Load Routine Load（例行导入）提供了一种自动从指定数据源进行数据导入的功能。您可以通过MySQL协议提交例行导入作业，生成...
补数据
补数据基于任意任务流的发布态版本，可通过指定业务时间或业务范围时间，生成一个或多个任务流实例（运行某条任务流的记录）。本文为您介绍如何给任务流补数据。使用场景 电商公司在多个时间段进行促销活动，需要分析促销活动带来的营收、...
产品优势
安全可靠 DTS底层为服务集群，如果集群内任何一个节点宕机或发生故障，控制中心都能够将这个节点上的所有任务快速切换到其他节点上，链路稳定性高。DTS内部对部分传输链路提供7×24小时的数据准确性校验，快速发现并纠正传输数据，保障传输...
数据分析概述
DataWorks提供的数据分析平台，可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中，您不仅可以在线洞察数据，还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...
如何处理Tair集群数据倾斜
下图介绍两个典型的数据倾斜场景，如下图所示，虽然Key均匀地分布在集群中，每个数据分片节点2个Key，但仍产生了数据倾斜：Replica 1 节点中 key1 的QPS明显高于其他Key，属于典型的 数据访问倾斜，会导致该Key所在的数据分片节点CPU使用率...
如何处理Redis集群数据倾斜
下图介绍两个典型的数据倾斜场景，如下图所示，虽然Key均匀地分布在集群中，每个数据分片节点2个Key，但仍产生了数据倾斜：Replica 1 节点中 key1 的QPS明显高于其他Key，属于典型的 数据访问倾斜，会导致该Key所在的数据分片节点CPU使用率...
GetAutoThrottleRules-获取自动SQL限流规则
1 NeverEnableAutoThrottleOrReleasedInstanceCount long 从未开启过自动 SQL 限流或者实例不存在的数据库实例数量。说明 实例不存在：数据库实例已经释放或者传入的数据库实例 ID 存在错误。1 EnableAutoThrottleList object[]正在使用...
集成云工作流
云工作流 支持将 云工作流 本身作为流程的节点集成到一个工作流中，即通过一个流程触发另一个或多个子流程。本文介绍 云工作流 集成 云工作流 的示例代码、参数说明、返回值说明和支持的集成模式以及错误定义。示例代码 以下为一个典型的 ...
概述
数据同步：数据同步属于持续性动作，项目创建后会一直同步数据，保持源端和目标端的数据一致性，实现关键业务的数据实时流动。您可以通过数据同步功能，实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、数据聚合和实时...
SQL限流
限流模式 支持的限流模式如下：参数 说明 支持的数据库 通过关键词限流 根据SQL语句中的关键词进行匹配从而限流。RDS MySQL PolarDB MySQL版 PolarDB-X 2.0 通过SQL模板ID限流 对SQL模板ID进行匹配从而限流，可从SQL日志、会话、EXPLAIN...
使用数据传输同步数据
数据同步能够保持源端和目标端的数据一致性，实现关键业务的数据实时流动。本文以同步 OceanBase 数据库的数据至 Kafka 为例，介绍如何使用数据传输同步数据。前提条件 在同步数据之前，您需要确认以下信息：数据传输已具备云资源访问权限...
实例会话
SQL限流：单击SQL限流，在弹出的SQL限流页面配置限流参数，对符合限流条件的实例会话进行SQL限流，详细操作请参见 SQL限流。优化：单击优化，对目标实例会话进行优化，详细操作请参见 SQL优化。导出活跃会话。结束会话。警告 结束会话有...
导出数据
在页面左侧的 数据库实例 列表区域，找到目标数据库。左键双击数据库名称，进入SQL Console。右键单击目标表，选择 导出>导出表结构。说明 您也可以在页面右上方选择>整库表结构。在 导出表结构 页面，导出数据字典文档。支持导出Word、...
Kafka实时ETL同步至Hologres
在弹出对话框中指定好 开始时间 和 采样条数 后，单击 开始采集 按钮，可以对指定的Kafka Topic进行数据采样，同时您可以预览Topic中的数据，为后续数据处理节点的数据预览和可视化配置提供输入。编辑数据处理节点。单击 图标可以增加数据...
导入数据
原因类别 根据实际情况选择数据导入的原因。业务背景 详细填写本次操作的业务背景，减少沟通成本。执行方式 根据需求，选择工单执行方式：审批通过后，提交者执行。审批通过后，自动执行。最后一个审批人执行。文件编码 选择数据库的文件...
数据分析整体趋势
市场趋势 数据规模高速增长（全球2010-2025年复合增长达到27%，中国则大于30%）带来了强劲的数据分析需求。据Gartner统计，到2025年实时数据占比达30%，其中非结构数据占比达80%，同时数据存储云上规模达45%，而云上数据库规模可达75%。从...
查询结果不符合预期的常见原因
只要写入过程中没有出现报错，相应的数据一定会写入成功，即使遇到机器宕机等情况，都可以通过恢复WAL的方式恢复数据，保障数据的持久性，不会出现数据写入后非预期不可见的情况。但是由于宽表引擎的特性比较多，例如数据版本号、时间戳、...
RBAC授权
本文介绍如何在数据流服务Confluent控制台中进行RBAC授权。背景信息 RBAC的全称是Role Based Access Control。RBAC的授权方式是基于角色进行授权的，而ACL是基于权限进行授权。因此，RBAC比ACL更适合批量授权以及权限回收。RBAC授权主要有...
EMR Workbench
通过EMR Workbench，您可以轻松进行数据开发，以及交互式数据分析，并设计复杂的数据处理工作流。功能介绍 EMR Notebook 交互式编程环境：支持Jupyter笔记本，提供灵活的编程环境。多语言支持：允许使用Python、SQL等多种语言进行数据分析...
Global AWR用户指南
架构与数据流 AWR架构说明 采集层：UE作为代理进程部署于物理机，负责采集 PolarDB PostgreSQL版 数据库集群的性能数据及事件信息。存储层：UE完成采集后，您可以配置将采集到的数据回写到对应的数据库集群中。展示层：提供Grafana展示,可...
Global AWR用户指南
架构与数据流 AWR架构说明 采集层：UE作为代理进程部署于物理机，负责采集 PolarDB PostgreSQL版（兼容Oracle）数据库集群的性能数据及事件信息。存储层：UE完成采集后，您可以配置将采集到的数据回写到对应的数据库集群中。展示层：提供...
Global AWR用户指南
架构与数据流 AWR架构说明 采集层：UE作为代理进程部署于物理机，负责采集 PolarDB PostgreSQL版（兼容Oracle）数据库集群的性能数据及事件信息。存储层：UE完成采集后，您可以配置将采集到的数据回写到对应的数据库集群中。展示层：提供...
强一致分布式事务
如果事务内写入的数据涉及多个分区，PolarDB-X 的计算节点将会使用两阶段提交（Two-phase Commit Protocol，简称2PC）方式提交事务，即便在事务提交过程中发生节点宕机等问题，基于2PC的事务恢复机制也能确保事务原子性。MVCC多版本 以上面...
数据传递
数据访问 与流程和流程执行相关的数据，无论是静态数据，还是动态数据，您都通过系统提供的$Context 表达式来访问相关的数据，Context中包含的数据内容如下：{"Execution":{"Name":"String","Input":{},"RoleArn":"String"},"Current":{...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
RDS术语
DTS Data Transmission Service，数据传输服务，是阿里云提供的实时数据流服务，支持RDBMS、NoSQL、OLAP等，集数据迁移/订阅/同步于一体，为您提供稳定安全的传输链路。更多信息，请参见 什么是数据传输服务DTS。地域 地域指的是您购买的...
自动SQL限流
SQL限流是限制数据库上执行SQL的并发度，通过限制问题SQL的并发度后，保障数据库正常响应业务请求，保障大部分的业务正常运转，即通过小部分业务受损，保障大部分业务正常运行。背景信息 随着技术的发展，尤其是云数据库的普及，数据库系统...
RDS术语
DTS Data Transmission Service，数据传输服务，是阿里云提供的实时数据流服务，支持RDBMS、NoSQL、OLAP等，集数据迁移/订阅/同步于一体，为您提供稳定安全的传输链路。更多信息，请参见 什么是数据传输服务DTS。地域 地域指的是您购买的...
新建 MySQL 数据源
建议您为迁移或同步项目创建单独的数据库用户。密码 数据库用户的密码。Database Name MySQL 数据库的名称。说明 如果您配置了 Database Name，当数据源作为源端时，数据迁移项目仅支持选择指定 Database Name 下的迁移对象。备注 数据源的...
新建 Oracle 数据源
建议您为迁移或同步项目创建单独的数据库用户。密码 数据库用户的密码。Schema Name Oracle 数据库的 Schema 名称。说明 如果您配置了 Schema Name，当数据源作为源端时，数据迁移或数据同步项目仅支持选择指定 Schema Name 下的迁移或同步...
新功能发布记录
DMS控制台切换 07月 功能名称 变更类型 功能描述 相关文档 离线集成 新增 离线集成是一种低代码开发数据加工任务的工具，您可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。离线集成概述 DevOps 新增 ...
Kafka兼容说明
流引擎的流表兼容Kafka协议，支持通过开源Kafka客户端写入数据，也支持通过Kafka生态工具将MySQL、日志等数据投递至流引擎。...将流表中的数据写入Kafka Topic。具体操作，请参见 通过开源Kafka客户端写入Lindorm流引擎数据。
通过脚本模式配置离线同步任务
离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据源相关能力介绍详情请参见：数据源概述。已购买合适规格的独享数据集成资源组。详情请参见：新增和使用独享数据集成资源组。独享数据集成资源组与数据源网络已...
RDS术语
DTS Data Transmission Service，数据传输服务，是阿里云提供的实时数据流服务，支持RDBMS、NoSQL、OLAP等，集数据迁移/订阅/同步于一体，为您提供稳定安全的传输链路。更多信息，请参见 什么是数据传输服务DTS。地域 地域指的是您购买的...
输入和输出
云工作流 的各种状态（State）之间需要传递数据，每个状态（State）将接受前一状态的输入（Input），并返回输出（Output）并将此输出传递给下一个状态（State）。本文介绍输入和输出的基础知识。流程和状态 流程（Flow）的多个状态（State...
- 产品推荐
- 这些文档可能帮助您