基本概念
S SYNC 指数据同步服务，是指将数据从数据同步服务端同步至客户端。设备 ID 针对圈定的设备 ID（utdid）投放广告。无论用户 ID 登录与否，只要在圈定的设备上打开，投放的广告都会显示。实验 实验是 AB 测试中的核心概念。一个实验代表了...
同步时源库为MySQL的注意事项及限制
当前任务的源数据仅支持同步到当前任务的目标端，同步过来的数据不会作为另一个任务的源数据继续同步。若目标库的DDL写入失败，DTS任务会继续运行，您需要在任务日志中查看执行失败的DDL。查看任务日志的方法，请参见 查询任务日志。若您将...
云数据库MongoDB版（副本集架构）间的双向同步
当前任务的源数据仅支持同步到当前任务的目标端，同步过来的数据不会作为另一个任务的源数据继续同步。由于DTS写入数据的逻辑为并发写入，所以会导致目标端占用的存储空间比源端大5%~10%。目标端MongoDB的count数量需要使用 db.$table_name...
云数据库MongoDB版（副本集架构）间的双向同步
当前任务的源数据仅支持同步到当前任务的目标端，同步过来的数据不会作为另一个任务的源数据继续同步。由于DTS写入数据的逻辑为并发写入，所以会导致目标端占用的存储空间比源端大5%~10%。目标端MongoDB的count数量需要使用 db.$table_name...
创建同步计划
添加完源端和目的端数据源，您就可以创建同步计划进行数据同步任务。本文介绍创建同步计划的操作步骤。前提条件 已开通阿里云 云备份 服务。开通 云备份 不收取任何费用，数据同步功能公测中，不收取任何费用。执行数据同步任务的机器已...
云数据库MongoDB版（分片集群架构）同步至云数据库...
数据传输服务DTS（Data Transmission Service）支持将MongoDB（分片集群架构）的数据同步至MongoDB（副本集架构或分片集群架构）。本文以 云数据库MongoDB版 实例间的数据同步为例，为您介绍操作步骤。前提条件 已创建目标 云数据库MongoDB...
云数据库MongoDB版（分片集群架构）同步至云数据库...
数据传输服务DTS（Data Transmission Service）支持将MongoDB（分片集群架构）的数据同步至MongoDB（副本集架构或分片集群架构）。本文以 云数据库MongoDB版 实例间的数据同步为例，为您介绍操作步骤。前提条件 已创建目标 云数据库MongoDB...
同步 OceanBase 数据库 MySQL 租户的数据至 Analytic...
如果开启，请设置 RPS（全量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制）和 BPS（全量同步阶段每秒最多可以同步至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量同步实际可以达到的...
极速同步
您可以使用极速同步功能，将OSS Bucket中的数据变化极速同步至所有通过文件网关连接至该Bucket的本地客户端。前提条件 已创建文件网关并添加缓存。具体操作，请参见 创建文件网关 及 添加缓存。已创建OSS Bucket。具体操作，请参见 创建...
NTP服务的DDoS攻击
概述 NTP协议（Network Time Protocol）是互联网中标准的网络时间同步协议，应用于分布式时间服务器和客户端之间，实现客户端和服务端的时间同步，从而使互联网内所有设备的时间保持同步。详细信息 NTP服务的DDoS攻击原理 NTP协议是基于UDP...
PostgreSQL数据源
PostgreSQL数据源为您提供读取和写入PostgreSQL双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的PostgreSQL数据同步能力支持情况。支持的版本 目前仅支持配置PostgreSQL数据源为PostgreSQL...
同步时源库为Oracle的注意事项及限制
如果同步的源数据库类型为自建Oracle，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为Oracle的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 在库表结构同步过程中...
小表广播
目标数据库：待同步表的目标端数据库。任务状态：广播任务的执行状态，包括 创建中、广播表创建失败、运行中、运行异常 与 已废弃。创建时间：广播任务创建的时间。修改时间：最近一次操作的时间。操作：支持 废弃、重试建表 与 刷新状态。...
云数据库MongoDB版（副本集架构）
您可以在数据传输服务DTS（Data Transmission Service）控制台创建数据同步任务，实时或定时将 云数据库 MongoDB 版 的副本集架构实例的增量数据同步至 函数计算 的指定函数。然后结合同步至函数中的数据，在 函数计算 编写相应的代码，对...
Hologres整库周期性增全量同步至MaxCompute
本文以Hologres离线同步写入MaxCompute场景为例，为您介绍如何把Hologres整个数据库的数据离线同步到MaxCompute。使用限制 本实践仅支持使用独享数据集成资源组。前提条件 已完成来源数据源、去向数据源的配置。本实践以Hologres作为来源...
AnalyticDB for MySQL3.0整库周期性增全量同步至...
本文以AnalyticDB for MySQL3.0离线同步写入Hologres场景为例，为您介绍如何把AnalyticDB for MySQL3.0整个数据库的数据离线同步到Hologres。使用限制 本实践仅支持使用独享数据集成资源组。前提条件 已完成来源数据源、去向数据源的配置。...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
操作 风险 解决方式 CREATE TABLE（且该表需要同步）如果该表存在目标端是分区表，源和目标端的索引不一致，需要进行 ETL 等情况，可能影响数据迁移性能，导致 ETL 不符合预期。必须开启 DataBase 级别的 PK、UK 补偿日志。手动添加涉及的...
配置数据层
杭州中心单元 创建同步任务方式 包括直接录入和手动创建的方式：直接录入：如果您在 数据传输控制台 已经创建一个状态为同步中（双向同步的反向同步链路状态也为同步中）的同步任务，则可以直接选择该同步任务进行录入。手动创建：如果您在...
云数据库MongoDB版（副本集架构）同步至函数计算FC
后续步骤 若待同步的单条数据大于16 MB，导致DTS任务报错，您可以修改同步对象或者使用ETL功能，过滤大字段的数据。操作方法，请参见 在已有同步任务上修改ETL配置 和 修改同步对象。根据实际需求，编写函数代码。更多信息，请参见 代码...
准备工作
您可以使用 云备份 来同步源端数据（包括NAS、HDFS、S3兼容存储等）到目的端（包括阿里云上）。在同步前，您需要完成操作授权、安装和激活客户端。（推荐）使用RAM用户AccessKey RAM是阿里云提供的用户身份管理与资源访问控制服务。RAM允许...
同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
如果开启，请设置 RPS（全量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制）和 BPS（全量同步阶段每秒最多可以同步至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量同步实际可以达到的...
MySQL整库离线同步到OSS
本文示例以MySQL为源端，OSS为目标端，为您介绍如何将MySQL整个数据库的数据离线同步到OSS。使用限制 仅支持使用独享数据集成资源组。操作步骤 步骤一：创建同步任务。步骤二：配置同步任务。步骤三：运行并查看任务状态。前提条件 已购买...
离线同步常见问题
数据同步原则：来源端数据源的数据要能写入目的端数据源（来源端和目的端类型需要匹配，字段定义的大小需要匹配），即源端数据类型需要与写端数据类型匹配，源端是VARCHAR类型的数据不可写到INT类型的目标列中；目标端的数据类型定义的大小...
PolarDB PostgreSQL版间的迁移
若DTS正向和反向同步任务均同步了某张表，且正向同步任务同步了该表的全量和增量数据，则反向同步任务只同步该表的增量数据。同步期间，DTS会在源库中创建前缀为dts_sync_的replication slot用于复制数据。通过该replication slot，DTS可以...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
增量同步 增量同步任务开始后，数据传输会同步源端数据库发生变化的数据（新增、修改或删除）至目标端数据库对应的表中。增量同步 包括 DML 同步 和 DDL 同步，您可以根据需求进行自定义配置。详情请参见 自定义配置 DDL/DML。增量同步 的...
sync（同步OSS文件到本地）
文件数量 通过sync命令执行同步任务时，如果没有携带-delete 选项，则单次同步任务同步的文件个数无限制。如果携带了-delete 选项，则单次同步任务最多可同步100万个文件。当同步的文件个数超出100万时，将报错 over max sync numbers ...
OceanBase 数据库 MySQL 租户之间的数据同步
如果开启，请设置 RPS（全量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制）和 BPS（全量同步阶段每秒最多可以同步至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量同步实际可以达到的...
RDS SQL Server同步至DataHub
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000或时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。单次同步任务仅支持同步至多10个数据库。当...
使用MongoShake实现MongoDB实例间的单向同步
当主备MongoShake同时从一个源端同步数据时，主MongoShake中需要设置该参数为 true。取值：true：开启 false：关闭 说明 默认值为false。master_quorum=false full_sync.http_port HTTP端口，开放该端口可通过外网查看MongoShake的当前全量...
实时同步常见问题
升级资源组规格：当源端数据量增大，或者同步解决方案任务重新编辑过同步任务（将任务由读取单库单表变更为读取多库多表），导致当前资源组消耗不了当前同步数据量级，此时您可选择扩大资源组规格，资源组规格调整详情请参考：变更规格操作...
自建Oracle同步至PolarDB MySQL版
如同步对象为表级别，且需进行编辑（如表列名映射），则单次同步任务仅支持同步至多1000张表。当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务。如果源库通过专线的方式接...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 准备工作 创建账号并授予...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000或时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。单次同步任务仅支持同步至多10个数据库。当...
设置增量同步位点
适用场景 您可以通过设置增量同步位点的方式实现以下场景：您在创建数据迁移或数据同步项目前，已确保源端和目标端的数据是一致的，需要获取某个时间节点之后的增量数据并同步至目标端。您不再需要源端数据库的历史数据，仅需同步某个时间...
OSS数据离线同步至MaxCompute
数据集成支持从OSS同步数据到其他目标端，也支持从其他目标端同步数据到OSS。本文以OSS离线同步写入MaxCompute为例，为您介绍OSS离线同步的完整流程。获取OSS Bucket信息 进入 OSS产品控制台。在Bucket列表下，找到您要进行数据同步的OSS ...
OSS数据离线同步至MaxCompute
数据集成支持从OSS同步数据到其他目标端，也支持从其他目标端同步数据到OSS。本文以OSS离线同步写入MaxCompute为例，为您介绍OSS离线同步的完整流程。获取OSS Bucket信息 进入 OSS产品控制台。在Bucket列表下，找到您要进行数据同步的OSS ...
获取MQTT客户端在线状态
云消息队列 MQTT 版 提供同步查询和异步上下线事件通知两种方式，来获取MQTT客户端在线状态。本文介绍这两种方式的基本原理、应用场景、具体差异以及实现方式。基本原理 云消息队列 MQTT 版 服务端（下文简称为MQTT服务端）提供以下方式...
阿里邮箱AD同步&认证
如只同步某根OU，不需要同步的对象请勿放置根OU下，或通过给OU的url打上nombx字符标记，AD user的WWWHomePage打上nombx字符标记，安全组的WWWHomePage打上nombx字符标记，OU下的通讯组都同步不支持单个不同步。3.同步只做新增、禁用、更新...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000或时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。单次同步任务仅支持同步至多10个数据库。当...
通过DTS将PolarDB MySQL数据同步至阿里云Elastic...
当您在使用PolarDB MySQL遇到查询慢的问题时，可以通过数据传输服务DTS（Data Transmission Service），将企业线上的PolarDB MySQL中的生产数据实时同步到阿里云Elasticsearch中进行搜索分析。本文介绍具体的实现方法。背景信息 本案例需要...
- 产品推荐
- 这些文档可能帮助您