从ECS上的Twemproxy Redis集群同步至Redis实例
阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务，基于高可靠双机热备架构及可平滑扩展的集群架构，可充分满足高吞吐、低延迟及弹性变配的业务需求。通过数据传输服务DTS（Data Transmission Service），...
从ECS上的Codis集群同步至Redis实例
阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务，基于高可靠双机热备架构及可平滑扩展的集群架构，可充分满足高吞吐、低延迟及弹性变配的业务需求。通过数据传输服务DTS（Data Transmission Service），...
从ECS上的Twemproxy Redis集群同步至Redis实例
阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务，基于高可靠双机热备架构及可平滑扩展的集群架构，可充分满足高吞吐、低延迟及弹性变配的业务需求。通过数据传输服务DTS（Data Transmission Service），...
从ECS上的Codis集群同步至Redis实例
阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务，基于高可靠双机热备架构及可平滑扩展的集群架构，可充分满足高吞吐、低延迟及弹性变配的业务需求。通过数据传输服务DTS（Data Transmission Service），...
MySQL数据源
是 无 table 选取的需要同步的表名称，一个数据集成任务只能同步数据到一张目标表。table 用于配置范围的高级用法示例如下：您可以通过配置区间读取分库分表，例如 'table_[0-99]' 表示读取 'table_0'、'table_1'、'table_2' 直到 'table_...
FineBI
主机 MySQL服务器地址，可以是本机或者远程服务器地址。端口 MySQL的端口号，通常为3306。用户名 在MySQL服务器中创建的用户名。密码 用户名对应的密码。数据库连接URL 系统自动生成连接URL。完成上述参数配置后，单击 启用新数据库，开始...
新功能发布记录
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 数据库至数据库的数据同步项目新增支持匹配规则能力，可以助力用户在数据同步项目中通过简单的配置通配符...
使用MongoShake实现MongoDB实例间的单向同步
当主备MongoShake同时从一个源端同步数据时，主MongoShake中需要设置该参数为 true。取值：true：开启 false：关闭 说明 默认值为false。master_quorum=false full_sync.http_port HTTP端口，开放该端口可通过外网查看MongoShake的当前全量...
MongoDB 4.0
同步数据 功能 通用型云盘版 功能影响及建议 使用DTS实现云数据库MongoDB实例间同步 使用MongoShake工具实现MongoDB实例间同步（副本集间单向同步）单节点实例不支持使用DTS或MongoShake工具实现数据同步。副本集实例 计费管理 功能 通用型...
各源环境迁移至阿里云
如果需要保证源服务器和数据完全同步，可以先将源服务器中的数据迁移至阿里云，然后使用增量迁移，在自定义的时间段内将源服务器系统产生的增量数据同步至阿里云。具体操作，请参见 增量迁移源服务器。在迁移前，您需要在源服务器中完成...
MongoDB 4.2
同步数据 功能 通用型本地盘版 独享型本地盘版 独占物理机 独享型云盘版 功能影响及建议 使用DTS实现云数据库MongoDB实例间同步：副本集同步至副本集或分片集群 本操作不影响实例的运行。使用MongoShake工具实现MongoDB实例间同步（副本集...
创建服务器迁移任务
重要 创建迁移任务后，目标ECS实例中的原数据将会清除（源服务器的数据不会被清除，例如您的源数据服务器为轻量应用服务器，轻量应用服务器的数据不会被清除）。如果ECS实例中存在重要数据，不推荐您使用该方式迁移。推荐您在迁移时，目标...
升级步骤
说明 集群创建后，DTS开始从源 PolarDB 集群同步数据，您需要在30天内 完成升级，超过30天将自动关闭升级功能。您可以在该区域选择 放弃升级，放弃升级后的影响请参见 常见问题。若状态显示为 预检查失败，请根据 错误信息 进行处理。例如...
PolarDB PostgreSQL版（兼容Oracle）间的迁移
预检查完成后，DTS会将源实例中待同步对象的全量数据在目标集群中初始化，作为后续增量同步数据的基线数据。说明 同步类型需要全选。同步拓扑 单向拓扑：只建立源库到目标库的单向同步链路，包括存量数据及增量同步链路。双向同步：建立源...
VMware无代理增量迁移
同步重复频率：表示增量迁移任务同步数据的时间间隔。最小时间间隔为1小时，最大时间间隔为7天。最大镜像保留数：表示最多为您保留的镜像个数，取值范围为1~10。每次增量迁移都会生成新的镜像，当生成的镜像文件总数超过该值时，最早生成且...
迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...
本文为您介绍如何使用数据传输迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
RDS术语
这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团内部以及云上的客户业务。更多信息，请参见 AliPG 功能概览。...
配置数据校验
本文介绍如何使用数据传输服务DTS（Data Transmission Service）配置数据校验任务，帮助您监控源库与目标库数据的差异。您可以在同步或迁移实例的 高级配置 阶段选择相应的 数据校验方式，或者单独配置数据校验任务，以便及时发现数据不...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
数据迁移和同步方案概览
使用场景 数据源 文档链接 从Kafka同步 Kafka 从Kafka同步 从Flink导入 Flink 从JDBC connector导入 从Flink SQL导入 从大数据导入/同步 DataWorks 从DataWorks同步 MaxCompute 从MaxCompute外表导入（19.15.2.2）从MaxCompute外表导入（20...
ASP.NET程序网站如何在多个站点之间实现Session共享
利用MySQL数据库共享Session数据 这个方式与NFS的方式类似，也是采用一台MySQL服务器做共享服务器，将所有的Session数据保存到MySQL服务器上，所有Web服务器都来这台MySQL服务器来获取Session数据。缺点也是依赖性太强，MySQL异常时会影响...
混合云解决方案
分发单独放在一台服务器，其目的是解决publisher故障转移时，分发服务器可以提供持续同步数据到订阅服务器。发布（publisher）和分发（distributor）是放在用户本地，拥有自主权限。订阅（subscriber）放在RDS上，建议不要用高可用RDS实例...
Oracle数据源
常见问题 实时同步Oracle、PolarDB、MySQL任务重复报错 主备同步数据恢复问题 主备同步问题指Oracle使用主从灾备，当主库报错切换至备库后，备库从主库不断地通过binlog恢复数据。由于主备数据同步存在一定的时间差，在网络延迟等特定情况...
1 人行方案选型标准
方案流程 云端应用添加人脸，IoT平台校验人脸照片质量 云端应用配置人脸权限，并同步到边缘服务器 边缘服务器计算人脸特征值，并存储在边缘服务器上 人员刷脸通行，门禁机抓拍人脸照片 门禁机发送人脸照片给边缘服务器认证 认证通过后，...
从ECS上的自建Redis同步至Redis实例
若目标Redis实例已开启透明数据加密TDE功能，则暂不支持通过DTS同步数据。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。支持的同步拓扑 一对一单向同步 一对多单向同步 级...
从ECS上的自建Redis同步至Redis实例
若目标Redis实例已开启透明数据加密TDE功能，则暂不支持通过DTS同步数据。若在数据同步过程中源端Redis发生连接闪断导致断点续传失败，则可能会使全量数据重新同步至目标端，从而导致数据不一致。费用说明 同步类型 链路配置费用 库表结构...
基本概念
为了进一步提高效率，云数据库ClickHouse 将海量数据分散存储到多台服务器上，每台服务器只存储和处理海量数据的一部分，在这种架构下，每台服务器被称为一个分片（Shard）。副本（Replica）为了在异常情况下保证数据的安全性和服务的高...
PolarDB MySQL版间的单向同步
RENAME TABLE限制 RENAME TABLE操作可能导致同步数据不一致。例如同步对象只包含某个表，如果同步过程中源实例对该表执行了重命名操作，那么该表的数据将不会同步到目标库。为避免该问题，您可以在数据同步配置时将该表所属的整个数据库...
同步 OceanBase 数据库的数据至 Kafka
背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台，数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步，扩展消息处理能力，广泛应用于实时数据仓库搭建、数据查询和报表分流等业务场景。前提条件 数据...
从通过专线、VPN网关或智能接入网关接入的自建Redis...
数据传输服务DTS（Data Transmission Service）支持Redis数据库的单向同步，适用于异地多活、数据异地容灾等多种应用场景。本文以通过专线、VPN网关或智能接入网关接入的自建Redis同步至ECS上的自建Redis为例，介绍数据同步作业的配置流程...
部署高可用架构应用集群
背景信息 高可用架构应用集群具备的特点如下所述：轻量应用负载均衡可以将公网访问的流量分发到后端多台轻量应用服务器上，在增强应用吞吐能力的同时，可以消除服务器的单点故障，提升应用可用性。通过自定义镜像功能，您可以快速创建部署...
配置跨库Spark SQL节点
任务编排中的跨库Spark SQL节点，主要针对各类跨库数据同步和数据加工场景，您可以通过编写Spark SQL，完成各种复杂的数据同步或数据加工的任务开发。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
PolarDB MySQL版间的单向同步
RENAME TABLE限制 RENAME TABLE操作可能导致同步数据不一致。例如同步对象只包含某个表，如果同步过程中源实例对该表执行了重命名操作，那么该表的数据将不会同步到目标库。为避免该问题，您可以在数据同步配置时将该表所属的整个数据库...
从自建Redis集群同步至Redis集群实例
若目标实例已开启透明数据加密TDE功能，则暂不支持通过DTS同步数据。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。支持的同步拓扑 一对一单向同步 一对多单向同步 级联...
从自建Redis集群同步至Redis集群实例
若目标实例已开启透明数据加密TDE功能，则暂不支持通过DTS同步数据。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。支持的同步拓扑 一对一单向同步 一对多单向同步 级联...
最佳实践概览
增量迁移源服务器 如果源服务器上的数据是不断更新的，建议您使用增量迁移。源服务器迁移至容器镜像 SMC支持将源服务器迁移到容器镜像服务，实现低成本容器化应用迁移。容器的优势在于提高了资源利用率，降低了计算成本，自动化管理调度及...
PostgreSQL数据源
常见问题 主备同步数据恢复问题 主备同步问题指PostgreSQL使用主从灾备，备库从主库不间断恢复数据。由于主备数据同步存在一定的时间差，特别在于某些特定情况，例如网络延迟等问题，导致备库同步恢复的数据与主库有较大差别，从备库同步的...
Redis实例间的单向数据同步
若源或目标实例已开启透明数据加密TDE功能，则暂不支持通过DTS同步数据。若源实例为自建Redis，则Slave和Master之间的复制超时时间参数 repl-timeout 建议使用 config set repl-timeout 600 命令设置为600秒。若源数据库数据量比较大，可以...
同步 OceanBase 数据库的数据至 RocketMQ
本文为您介绍如何使用数据传输同步 OceanBase 数据库的数据至 RocketMQ。背景信息 消息队列 RocketMQ 是阿里云基于 Apache RocketMQ 构建的低延迟、高并发、高可靠的分布式消息中间件。数据传输的数据同步功能可以帮助您实现 OceanBase ...
Redis实例间的单向数据同步
若源或目标实例已开启透明数据加密TDE功能，则暂不支持通过DTS同步数据。若源实例为自建Redis，则Slave和Master之间的复制超时时间参数 repl-timeout 建议使用 config set repl-timeout 600 命令设置为600秒。若源数据库数据量比较大，可以...
- 产品推荐
- 这些文档可能帮助您