旧版本 AD/LDAP 账户同步配置
同时支持向 AD 或 OpenLDAP 的增量和全量同步。新建LDAP配置 操作步骤 以IT管理员账号登录云盾IDaaS管理平台。点击左侧导航栏 账户->机构及组。点击【配置LDAP】，新建LDAP配置，填入必填信息，开启从 IDaaS 同步至 LDAP。服务器链接：服务...
API概览
将DTS同步实例的同步拓扑从单向同步升级为双向同步。修改DTS产品的付费方式或实例规格。升级或降级DTS实例规格。为DTS实例续费，仅适用于预付费类型的DTS实例。ResetDtsJob 重置一个数据迁移、同步或订阅任务。SuspendDtsJob 暂停一个数据...
升级单向同步至双向同步
调用UpgradeTwoWay接口将DTS同步实例的同步拓扑从单向同步升级为双向同步，目前只支持后付费任务的升级。请确保在使用该接口前，已充分了解云数据库DTS产品的收费方式和 价格。使用该接口需注意：数据同步任务的源实例和目标实例的数据库...
基本操作
本文为您介绍用户组的基本操作，包括...从用户组移除用户 说明 当启用SCIM同步后，不能从SCIM同步的用户组中移除用户。在 用户组 页面，单击目标用户组名称。单击 成员 页签。单击目标用户 操作 列的 移除。在 移除成员 对话框，单击 确定。
实时同步任务运维
位点设置：支持断点续传或从指定同步起始位置开始同步。FailOver：为避免FailOver导致频繁启动任务占用系统资源，您可配置指定时间段内FailOver出现次数超过指定次数时，任务自动结束运行。如果您不配置Failover次数，将根据5分钟内，...
升级步骤
检查角色列表中，是否已存在名为 AliyunServiceRoleForPolarDB 的服务关联角色，如下：若已存在，则进行 步骤一：从RDS同步；若不存在，则需创建相关角色。单击左侧 创建角色。在弹出的 创建角色 对话框中，选择 阿里云服务，并单击 下一步...
升级步骤
检查角色列表中，是否已存在名为 AliyunServiceRoleForPolarDB 的服务关联角色，如下：若已存在，则进行 步骤一：从RDS同步；若不存在，则需创建相关角色。单击左侧 创建角色。在弹出的 创建角色 对话框中，选择 阿里云服务，并单击 下一步...
JindoFS缓存模式
once 为默认配置，表示只从OSS同步一次元数据；always 表示每次操作都会同步OSS上的元数据。说明 当不配置 namespace.sync.interval 参数时，才会去使用Load策略；如果已配置 namespace.sync.interval 参数，则Load策略配置不生效。...
同步日志
在当前版本中，不同同步方式下，同步日志的记录情况如下：入方向 出方向 记录同步日志 从身份提供方同步 由 IDaaS 推送给应用 由 IDaaS 推送给身份提供方（暂不支持）不记录同步日志，但会记录为管理或用户日志 OpenAPI Developer API（暂...
从Kafka同步数据
说明 云数据库ClickHouse 集群从Kafka进行数据同步目前仅支持云消息队列Kafka和部署在ECS上的自建Kafka。本文以云消息队列Kafka进行数据同步为例。前提条件 已创建目标 云数据库ClickHouse 集群，且保证消息队列Kafka和目标 云数据库...
MSE Sync迁移方案
MSE Sync是一款基于开源Nacos Sync项目深度定制和优化的数据同步工具，不仅具备双向数据同步能力，还集成了自动服务发现与一键全量同步服务等高效功能。通过采用多实例部署架构，实现了高级别的容灾备份机制，适用于在Nacos、Zookeeper以及...
OSS数据离线同步至MaxCompute
数据集成支持从OSS同步数据到其他目标端，也支持从其他目标端同步数据到OSS。本文以OSS离线同步写入MaxCompute为例，为您介绍OSS离线同步的完整流程。获取OSS Bucket信息 进入 OSS产品控制台。在Bucket列表下，找到您要进行数据同步的OSS ...
OSS数据离线同步至MaxCompute
数据集成支持从OSS同步数据到其他目标端，也支持从其他目标端同步数据到OSS。本文以OSS离线同步写入MaxCompute为例，为您介绍OSS离线同步的完整流程。获取OSS Bucket信息 进入 OSS产品控制台。在Bucket列表下，找到您要进行数据同步的OSS ...
EMR Hive数据整库离线同步至MaxCompute
数据集成支持从Hive同步数据到其他目标端，也支持从其他目标端同步数据到Hive。添加数据源 新建MaxCompute数据源 新增MaxCompute数据源。详情请参见 创建MaxCompute数据源。新建Hive数据源 在DataWorks 数据源管理 页面，单击 新建数据源，...
EMR Hive数据整库离线同步至MaxCompute
数据集成支持从Hive同步数据到其他目标端，也支持从其他目标端同步数据到Hive。添加数据源 新建MaxCompute数据源 新增MaxCompute数据源。详情请参见 创建MaxCompute数据源。新建Hive数据源 在DataWorks 数据源管理 页面，单击 新建数据源，...
MaxCompute数据离线同步至ClickHouse
数据集成支持从ClickHouse同步数据到其他目标端，也支持从其他目标端同步数据到ClickHouse。本文以MaxCompute离线同步写入ClickHouse为例，为您介绍ClickHouse离线同步的完整流程。使用限制 ClickHouse离线同步仅支持阿里云ClickHouse。...
账户同步接入概述
一致性依赖：可能有一系列相关方，依赖于您的应用中的身份数据，进行营销或验证，由此希望能够及时地从 IDaaS 同步账户的变化。例如在用户入职时，在 IDaaS 中创建账户，HR 应用需要近乎同时创建账户，才不会耽搁入职流程。可以通过订阅 ...
使用密码机实例集群
警告 同步集群预计需要5分钟，请在业务空闲期进行同步，以免影响业务运行。在 实例列表 页面，找到目标主密码机实例，在 操作 列单击 同步集群。在弹出的对话框，再次单击 同步集群。扩展集群 您可以将处于不同可用区的密码机实例加入到同...
DRDS（PolarDB-X）数据源
DRDS（PolarDB-X）数据源为您提供读取和写入DRDS（PolarDB-X）双向通道的功能，本文为您介绍DataWorks的DRDS（PolarDB-X）数据同步的能力支持情况。支持的版本 实时读取 支持DRDS（PolarDB-X 1.0）和PolarDB-X 2.0的非只读实例。创建DRDS...
创建异地灾备实例
背景信息 RDS通过数据传输服务（DTS）实现主实例和异地灾备实例之间的实时同步。主实例和灾备实例均搭建主备高可用架构，当主实例所在区域发生突发性自然灾害等状况，主实例（Master）和备实例（Slave）均无法连接时，可将异地灾备实例切换...
修改同步对象
DTS支持在数据同步实例运行过程中新增或移除同步对象，无需重新配置同步实例，帮助您在降低对业务影响的情况下变更同步对象。前提条件 数据同步实例进入 增量写入 模块，且处于 运行中 或同步失败的状态。为保障DTS可以正常连接源和目标库...
使用数据传输同步数据
数据同步能够保持源端和目标端的数据一致性，实现关键业务的数据实时流动。本文以同步 OceanBase 数据库的数据至 Kafka 为例，介绍如何使用数据传输同步数据。前提条件 在同步数据之前，您需要确认以下信息：数据传输已具备云资源访问权限...
概述
除此之外，全局只读节点可以直接同步 多主集群（库表）下所有RW节点的数据，不需要额外购买多个DTS同步链路。低延迟。DTS数据同步的延迟时间一般为秒级，而全局只读数据同步的延迟时间为几十毫秒，极大程度地提升了汇聚库数据的时效性。...
OceanBase 数据库 MySQL 租户之间的数据同步
同步类型包括 结构同步、全量同步 和 增量同步，增量同步 包括 DML 同步 和 DDL 同步，您可以根据需求进行自定义配置。详情请参见 自定义配置 DDL/DML。DML 同步 包括 Insert、Delete 和 Update，默认全部勾选。DDL 同步 支持 ADD COLUMN ...
PolarDB数据源
不配置时，默认为false，表示从主库读取数据。否 false column 所配置的表中需要同步的列名集合，使用JSON的数组描述字段信息。默认使用所有列配置，例如[*]。支持列裁剪，即列可以挑选部分列进行导出。支持列换序，即列可以不按照表Schema...
同步 OceanBase 数据库 MySQL 租户的数据至 Analytic...
同步类型包括 结构同步、全量同步 和 增量同步，增量同步 包括 DML 同步 和 DDL 同步，您可以根据需求进行自定义配置。详情请参见 自定义配置 DDL/DML。DML 同步 包括 Insert、Delete 和 Update，默认全部勾选。DDL 同步 支持 ADD COLUMN ...
同步 OceanBase 数据库的数据至 RocketMQ
本文为您介绍如何使用数据传输同步 OceanBase 数据库的数据至 RocketMQ。背景信息 消息队列 RocketMQ 是阿里云基于 Apache RocketMQ 构建的低延迟、高并发、高可靠的分布式消息中间件。数据传输的数据同步功能可以帮助您实现 OceanBase ...
通过数据同步功能同步Kafka至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建Kafka同步链路，通过同步链路从指定时间位点，实时同步Kafka中的数据入湖，以满足近实时产出、全量历史归档、弹性分析等需求。本文主要介绍如何添加Kafka数据源，新建Kafka同步链路并启动任务，...
实时同步任务延迟解决方案
说明 实时同步任务从一个系统读数据，并将数据写入另一个系统，当写数据比读数据慢时，则读数据一侧的系统会受到反压，导致速度变慢。即造成瓶颈的系统可能会由于反压导致另一侧系统的一些异常，此时要优先关注造成瓶颈的系统的异常情况。...
同步 OceanBase 数据库的数据至 Kafka
本文为您介绍如何使用数据传输同步 OceanBase 数据库的数据至 Kafka。背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台，数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步，扩展消息处理能力，广泛应用...
同步 OceanBase 数据库的数据至 DataHub
本文为您介绍如何同步 OceanBase 数据库（MySQL 和 Oracle 租户）的数据至 DataHub。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 OceanBase 数据库创建专用于数据同步项目的数据库用户，并为其赋予...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 准备工作 创建账号并授予...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 准备工作 创建账号并授予...
PolarDB PostgreSQL版（兼容Oracle）集群同步至...
数据传输服务DTS（Data Transmission Service）支持将 PolarDB PostgreSQL版（兼容Oracle）集群同步至 云原生数据仓库AnalyticDB MySQL版 3.0。前提条件 已创建目标 云原生数据仓库AnalyticDB MySQL版 3.0，详情请参见 创建集群。源 ...
PolarDB-X 1.0同步至Elasticsearch
本文介绍如何使用数据传输服务DTS（Data Transmission Service）将数据从PolarDB-X 1.0同步至Elasticsearch。前提条件 源 PolarDB-X 1.0 的存储类型支持为RDS MySQL（包括私有定制RDS和单独购买的RDS），暂不支持为PolarDB MySQL。已创建...
PolarDB PostgreSQL版间的迁移
若DTS正向和反向同步任务均同步了某张表，且正向同步任务同步了该表的全量和增量数据，则反向同步任务只同步该表的增量数据。同步期间，DTS会在源库中创建前缀为dts_sync_的replication slot用于复制数据。通过该replication slot，DTS可以...
通过RAM角色授权模式配置数据源
选择角色 从 选择角色 下拉列表中选择RAM角色。测试网络连通性。在 数据集成 页签下，单击相应资源组后的 测试连通性。数据同步时，一个任务只能使用一种资源组。您需要测试每种资源组的连通性，以保证同步任务使用的数据集成资源组能够与...
概述
GDN网络中所有集群的数据保持同步，网络中每个集群均提供读服务（写服务会被转发到主集群处理），并且提供异地灾备能力，可满足如下应用场景：异地多活 如果业务部署在多个地域，传统网络下，数据库在主地域，其它地域的应用需要跨地域访问...
Redis数据迁移方案概览
Tair（Redis企业版）源库 标准（主从）架构 集群架构 读写分离架构 目标库 标准（主从）架构 集群架构 读写分离架构 全量数据迁移 增量数据迁移 阿里云跨账号迁移 权限要求 对于不同的迁移场景，DTS所需的权限有所区别，在配置数据迁移前，...
接入第三方云资产
接入方式 接入说明 云安全中心采集的数据 在第三方云资产手动安装Agent 使用该方式接入时，第三方云资产作为云外主机接入，云安全中心无法识别资产所属的服务商信息。IP信息、主机名称、操作系统类型、 CPU核数 通过第三方账号AK接入云资产...
- 产品推荐
- 这些文档可能帮助您