数据同步方案咨询及支持 与客户共同梳理业务架构和数据库的数据同步/迁移方案,并结合丰富的云上数据库迁移/同步经验,提供满足业务需求的数据同步/迁移方案,并提供数据同步/迁移相关的技术支持工作。包括但不限于如下场景:1、通过阿里云...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...
DML操作:INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 所需权限 授权方法 RDS SQL Server实例 待同步数据库的所有者权限。修改账号权限 云原生数据仓库AnalyticDB PostgreSQL实例 LOGIN权限。目标表的SELECT、CREATE、INSERT、...
配置页面的右侧为源端数据库表的预览,是根据上述步骤中配置的数据源预览出来的待同步的数据库表和已选择好要同步的数据库表的预览情况。您可根据待同步的源端数据库表的数量,参考以下操作建议,快速选择要同步的库表。如果您的数据库表...
源库版本检查 DTS不支持该版本的数据库,DTS支持数据库版本信息请参见 同步方案概览。升级或降级数据库版本。数据库存在性检查 当待同步的数据库在目标实例中不存在,由DTS自动创建时,可能由于下述原因导致创建失败:数据库名包含小写字母...
前提条件 自建SQL Server数据库支持的版本,请参见 同步方案概览。已创建目标 云原生数据仓库AnalyticDB PostgreSQL版 实例,如未创建请参见 创建实例。目标 云原生数据仓库AnalyticDB PostgreSQL版 实例的存储空间须大于自建SQL Server...
当您在使用关系型数据库(RDS)遇到查询慢的问题时,可将RDS中的数据同步至阿里云Elasticsearch进行查询分析。阿里云Elasticsearch是一个基于Lucene的实时分布式的搜索与分析引擎,可近乎于准实时地存储、查询和分析超大数据集。您可以通过...
DML操作:INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 所需权限 授权方法 RDS SQL Server实例 待同步数据库的所有者权限。修改账号权限 云原生数据仓库AnalyticDB PostgreSQL实例 LOGIN权限。目标表的SELECT、CREATE、INSERT、...
说明 如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等)或ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中,您无需手动添加,请参见 DTS服务器的IP...
RDS:阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,解决数据库运维的烦恼。PolarDB:PolarDB是阿里云自研的下一代关系型云数据库...
PolarDB MySQL版同步至云数据库SelectDB版 PolarDB MySQL版迁移至云数据库SelectDB版 新增 新增支持SQL Server 2022版本和Redis 7.0版本。同步方案概览 迁移方案概览 优化 源自建MongoDB以 专线/VPN网关/智能网关、公网IP 或 云企业网CEN ...
编辑目标索引 同步解决方案默认根据源端生成目标索引结构,可能存在字段类型转换,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标索引时,将自动为源端字段匹配目标端可写入的字段类型。支持您单击 Elasticsearch...
云数据库MongoDB版同步至云原生多模数据库Lindorm 新增 新增支持将MySQL的数据同步或迁移到SelectDB,以满足您的海量数据分析需求。RDS MySQL同步至云数据库SelectDB版 RDS MySQL迁移至云数据库SelectDB版 优化 MySQL的数据同步或迁移至...
不同源端与目标端数据库支持的同步方案不同,具体支持的方案详情请参考产品界面。更多同步任务产品能力介绍,详情请参见:数据集成侧同步任务能力说明。使用限制 跨时区同步限制:同步任务暂不支持跨时区同步数据。如果同步任务中读取和...
前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB分布式版 实例,支持的版本,请参见 同步方案概览。说明 PolarDB分布式版 需兼容MySQL 5.7版本。目标数据库的存储空间须大于源数据库占用的存储空间。注意事项 说明 在库表结构同步过程...
前提条件 自建SQL Server数据库支持的版本,请参见 同步方案概览。已创建目标 云原生数据仓库AnalyticDB PostgreSQL版 实例,如未创建请参见 创建实例。目标 云原生数据仓库AnalyticDB PostgreSQL版 实例的存储空间须大于自建SQL Server...
Mongodump和Mongorestore是MongoDB数据库自带的备份恢复工具。您可以在本地设备或ECS实例中安装MongoDB数据库,然后借助该工具将自建MongoDB数据库迁移至阿里云MongoDB副本集实例。推荐 使用DTS迁移副本集架构的自建MongoDB数据库上云,可...
前提条件 已创建源 Db2 for LUW 数据库和目标 云原生数据仓库AnalyticDB MySQL版 3.0实例,支持的版本,请参见 同步方案概览。目标数据库的存储空间须大于源数据库占用的存储空间。注意事项 说明 在库表结构同步过程中,DTS会将源数据库中...
推荐使用DTS迁移单节点架构的自建MongoDB数据库上云,可实现不停机迁移上云,操作步骤,请参见 云数据库MongoDB版(单节点架构)全量迁移至云数据库MongoDB版(所有架构)。更多数据迁移或同步场景的解决方案,请参见 数据迁移和同步方案...
前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB MySQL版 集群,支持的版本,请参见 同步方案概览。目标数据库的存储空间须大于源数据库占用的存储空间。注意事项 说明 在库表结构同步过程中,DTS会将源数据库中的外键同步到目标数据...
数据库账号的权限要求 迁移数据源 全量数据迁移 增量数据迁移 自建MongoDB数据库 待迁移库的read权限 待迁移库、admin库和local库的read权限 阿里云MongoDB数据库 目标库的readWrite权限 目标库的readWrite权限 数据库账号创建及授权方法:...
Mongodump和Mongorestore是MongoDB数据库自带的备份恢复工具。您可以在本地设备或ECS实例中安装MongoDB数据库,然后借助该工具将自建MongoDB数据库迁移至阿里云MongoDB分片集群实例。背景信息 建议通过DTS迁移分片集群架构的自建MongoDB...
前提条件 自建SQL Server数据库支持的版本,请参见 同步方案概览。已创建目标 PolarDB MySQL版 集群,详情请参见 购买按量付费集群 和 购买包年包月集群。PolarDB MySQL版 集群的存储空间须大于自建SQL Server数据库占用的存储空间。若源...
说明 如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等)或ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中,您无需手动添加,请参见 DTS服务器的IP...
数据传输服务DTS(Data Transmission Service)支持将使用专线、VPN网关或智能网关接入的自建MySQL数据库同步至 RDS MySQL 实例。前提条件 已将自建MySQL数据库接入到阿里云。更多信息,请参见 本地IDC接入至阿里云。说明 支持的版本,请...
更多数据迁移或数据同步场景的解决方案,请参见 数据迁移和同步方案概览。前提条件 自建MongoDB和云数据库MongoDB支持的版本,请参见 迁移方案概览。建议云数据库MongoDB的存储空间比自建MongoDB数据库占用的存储空间大10%。注意事项 单...
背景知识 同步方案概览 介绍数据同步功能支持的数据库、同步初始化类型和同步拓扑,以及配置步骤。结构初始化涉及的数据类型映射关系 由于不同的数据库支持的数据类型不一样,数据类型无法完全对应。DTS在执行结构初始化时,会根据目标库...
注意事项 执行该操作后,将造成下述影响,请谨慎操作:数据同步作业将停止同步数据,即不再将源库的增量数据变更和结构变更同步至目标库。数据同步作业的配置(含监控报警策略)信息将被清空,并转变为 未配置 状态。操作步骤 登录 数据...
如果同步的源数据库类型为MongoDB,如自建MongoDB、云数据库MongoDB,您需要在配置具体的同步任务前,参考本文的注意事项及限制,以保障数据同步任务的正常运行。源库为MongoDB的同步方案概览 根据如下同步方案,查看同步任务的注意事项及...
目标实例 RDS PostgreSQL 的创建方式和支持的版本,请参见 创建RDS PostgreSQL实例 和 同步方案概览。说明 建议源库和目标数据库的版本相同,或者从低版本同步到高版本以保障兼容性。如为高版本同步至低版本,可能存在数据库兼容性问题。...
如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等),DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单中;如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添...
更多数据迁移和同步场景的解决方案,请参见 MongoDB数据迁移和同步方案概览。前提条件 自建MongoDB和云数据库MongoDB支持的版本,请参见 迁移方案概览。确保目标分片集群实例中的Shard节点具备充足的存储空间。说明 例如自建数据库中有三个...
如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中,您还需确保自建数据库没有限制ECS的访问(若数据库是集群部署在多个ECS实例,您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中,您还需确保自建数据库没有限制ECS的访问(若数据库是集群部署在多个ECS实例,您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
建议在执行数据同步前了解源库为Oracle时DTS支持的能力和限制条件,并使用ADAM(Advanced Database&Application Migration)进行数据库评估,以便您平滑地完成Oracle同步上云。更多信息,请参见 Oracle数据库的限制和准备工作 和 数据库...
您需要在数据集成同步任务配置前,配置好您需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
常见数据源 Hologres内置同步方案 DataWorks数据集成方式同步数据 Flink方式同步数据 MaxCompute 支持(推荐,SQL命令)支持 支持 OSS 支持(推荐,SQL命令)支持 不支持 本地文件 支持(Copy命令)不支持 不支持 MySQL等数据库 不支持 ...
数据集成附加字段支持的变量字段如下:EXECUTE_TIME:执行时间 UPDATE_TIME:更新时间 DB_NAME_SRC:原始数据库名称 DB_NAME_SRC_TRANSED:转换后数据库名称 DATASOURCE_NAME_SRC:源端数据源名称 DATASOURCE_NAME_DEST:目的端数据源名称 ...
编辑目标索引 同步解决方案默认根据源端生成目标索引结构,可能存在字段类型转换,即若目标端数据库中没有与源端一致的数据类型时,同步任务在自动创建目标索引时,将自动为源端字段匹配目标端可写入的字段类型。支持您单击 Elasticsearch...
如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中,您还需确保自建数据库没有限制ECS的访问(若数据库是集群部署在多个ECS实例,您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...