源数据库 目标数据库 云数据库MongoDB版(副本集架构)云数据库MongoDB版(副本集架构、分片集群架构)ECS上的自建MongoDB数据库(副本集架构)ECS上的自建MongoDB数据库(副本集架构、分片集群架构)通过专线、VPN网关或智能网关接入的自...
使用数据传输服务DTS(Data Transmission Service),将副本集架构的自建MongoDB数据库迁移至云数据库MongoDB中。DTS支持全量数据迁移和增量数据迁移,同时使用这两种迁移类型可以实现在不停服的情况下,平滑地完成数据库的迁移上云。除本...
本文介绍如何使用数据传输服务DTS(Data Transmission Service),将单节点架构的自建MongoDB数据库迁移至云数据库MongoDB中。除本方法外,您也可以 使用MongoDB工具将自建数据库迁移至单节点实例。更多数据迁移或数据同步场景的解决方案,...
本文以ECS自建数据库为源数据库,MyBase MySQL实例为目标数据库介绍配置流程,其他数据源配置流程与本案例类似。源数据库 目标数据库 阿里云实例。以下类型的自建数据库:有公网IP的自建数据库。ECS上的自建数据库。通过专线、VPN网关或...
离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务,包括MaxCompute、Hive、TDH Inceptor等数据源。本文为您介绍如何新建并配置整库迁移任务。前提条件 已完成所需迁移的数据源创建。整库迁移支持MySQL、...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
ECS实例ID 选择作为同步数据源的ECS实例ID。数据库类型 购买数据同步实例时选择的数据库类型:MySQL,不可变更。端口 填入自建MySQL数据库的服务端口,默认为 3306。数据库账号 填入自建MySQL数据库的账号,需具备REPLICATION CLIENT、...
数据库备份DBS支持MySQL、SQL Server、PostgreSQL等阿里云数据库,以及ECS上的自建数据库、线下数据库、其他云数据库进行备份恢复操作。本文以ECS MySQL为例,介绍如何通过DBS实现ECS数据库的灾备与安全,满足实时备份、快速恢复、异地灾备...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
已完成图数据库GDB数据源配置,配置方法请参见 配置Graph Database数据源。操作步骤 配置同步任务脚本 单击目标DataWorks工作空间所在行 操作 列的 进入数据开发。创建离线同步节点,具体请参见 离线同步节点。在 选择数据源 向导下,执行...
本文介绍如何使用 数据库备份DBS 创建自建数据库的异地备份任务,实现异地容灾需求。本示例将位于杭州的自建MySQL数据库备份至华北2(北京)。本文也适用于其他数据库类型的自建库,例如自建Oracle、SQL Server数据库等,关于其他备份参数...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务,包括MaxCompute、Hive、TDH Inceptor等数据源。本文为您介绍如何新建并配置整库迁移任务。前提条件 已完成所需迁移的数据源创建。整库迁移支持MySQL、...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
您需要在配置集成任务前,配置好您需要集成的数据源和目标数据库,以便在开发配置离线集成脚本过程中读取和写入数据库。离线管道支持的数据源详情,请参见 数据集成支持的数据源。步骤一:创建离线脚本 在Dataphin首页,单击顶部菜单栏的 ...
您需要在配置集成任务前,配置好您需要集成的数据源和目标数据库,以便在开发配置离线集成脚本过程中读取和写入数据库。离线管道支持的数据源详情,请参见 离线集成支持的数据源。步骤一:创建离线脚本 在Dataphin首页,单击顶部菜单栏的 ...
目标库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源(HDFS、Hive和JDBC)时,可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
在工作台页面,单击 数据准备>数据源,进入数据源页面,单击 新建数据源。从 类型 列表中,选择 AnalyticDB for PostgreSQL。在 网络 列表中选择连接的网络类型,并选择实例所在的区域。内网:通过 AnalyticDB PostgreSQL版 的内网地址连接...
DTS.Msg.EcsJoinSecurityGroupLimitExceeded 配置数据源为 ECS自建数据库 的任务时。原因:ECS实例的安全组超过五个。解决方法:请根据业务需求并参考 移出安全组,移出ECS实例中多余的安全组后重试。说明 若由于业务需求安全组均无法移出...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件,并使用ADAM(Advanced Database&Application Migration)进行数据库评估,以便您平滑地迁移上云。更多信息,请参见 Oracle数据库的限制和准备工作 和 数据库评估概览。...
关于如何修改 主库是否接受读 设置,具体操作请参见 配置数据库代理。如果您的数据库代理版本为1.x.x或为2.5.1及以上,主库是否接受读 配置更改后会立即生效。如果您的数据库代理版本为2.x.x且为2.5.1之前的版本,主库是否接受读 配置更改...
ECS实例ID 选择作为同步数据源的ECS实例ID。数据库类型 购买数据同步实例时选择的数据库类型:MySQL,不可变更。端口 填入自建MySQL数据库的服务端口,默认为 3306。数据库账号 填入自建MySQL数据库的账号,需具备REPLICATION CLIENT、...
切换证书来源为 使用云端证书,单击 配置数据库证书(防止伪装数据库)后的 配置 按钮,选择需要保护的连接地址。说明 如果您未开启外网地址,请选择需要保护的连接串 对话框中将会显示RDS PostgreSQL实例的内网连接地址。如果您开启了外网...
数据集成附加字段支持的变量字段如下:EXECUTE_TIME:执行时间 UPDATE_TIME:更新时间 DB_NAME_SRC:原始数据库名称 DB_NAME_SRC_TRANSED:转换后数据库名称 DATASOURCE_NAME_SRC:源端数据源名称 DATASOURCE_NAME_DEST:目的端数据源名称 ...
本文以有公网IP的自建数据库为例介绍配置流程,其他类型的源数据库配置流程与本案例类似。RDS MySQL 实例。以下类型的自建数据库:有公网IP的自建数据库。ECS上的自建数据库。通过专线、VPN网关或智能网关接入的自建数据库。通过数据库网关...
说明 建议在业务低峰期采集数据库数据,通常业务低峰期采集只需要较短时间就可以完成采集。采集器对CPU要求不高,如果涉及到数据库对象的getddl操作,采集开始时CPU负载会有一些增加,负载增加量取决于源数据库规格和当前负载。采集器对源...
源库信息 选择已有的DMS数据库实例(可选,如未创建可忽略此处选择,直接在下方配置数据库信息即可)您可以按实际需求,选择是否使用已有实例。如使用已有实例,下方数据库信息将自动填入,您无需重复输入。如不使用已有实例,您需要输入...
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...
附录:高级配置 设置同步来源与规则 选择源端数据源中需要同步的库和表后,同步任务默认将源端数据库、数据表写入目标端同名schema或同名表中,如果目标端不存在该schema或表,将会自动创建。同时,您可以通过 设置表(库)名的映射规则 ...