使用数据传输迁移数据

本文以迁移 MySQL 数据库的数据至 OceanBase 数据库为例,介绍如何使用数据传输迁移数据。前提条件 在迁移数据之前,您需要确认以下信息:数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。您已创建源端和目标端的数据源。...

概述

数据传输是 OceanBase 数据库提供的一种支持同构或异构数据源与 OceanBase 数据库之间进行数据交互的服务,具备在线迁移存量数据和实时同步增量数据的能力。产品功能 数据传输提供可视化的集中管控平台,您只需要进行简单的配置即可实时...

新建 PolarDB-X 2.0 数据

本文为您介绍如何在数据传输中新建 PolarDB-X 2.0 数据源。背景信息 云原生数据库 PolarDB 分布式版(简称 PolarDB-X)是由阿里巴巴自主研发的云原生分布式数据库,为您提供高吞吐、大存储、低延时、易扩展和超高可用的云时代数据库服务。...

添加 OceanBase 数据源的白名单

IP 地址 在 数据传输>新建数据源 对话框中,复制显示的 OceanBase 数据传输服务器的 IP 地址,添加在此处即可。请注意以下规则:支持填写 IP 地址(例如 192.168.0.1)或 IP 段(例如 192.168.0.0/24)。多个 IP 需要用英文逗号(,)分隔。...

更改 Topic

本文为您介绍如何使用数据传输提供的更改 Topic 功能。适用场景 创建数据库至消息队列的数据同步项目时,数据传输支持您在选择需要同步的 Topic 类型后,通过 更改 Topic 功能重新选择 Topic 名称。操作步骤 将数据同步项目配置至 选择同步...

调整迁移速率

数据传输服务DTS(Data Transmission Service)的同步和迁移实例在进行数据传输的过程中,您可以根据源和目标库的读写压力情况调整迁移的速率,以降低数据库的负载。注意事项 若您有修改同步对象的操作,则修改同步对象后生成的子任务,...

查看数据迁移项目的详情

当源库不断有业务写入时,数据传输会在全量数据迁移启动前,启动增量拉取模块,以拉取源实例中的增量更新数据,对其进行解析、封装,并存储至数据传输中。当全量数据迁移完成后,数据传输会启动增量数据回放模块,从增量数据拉取模块中获取...

通过RAM授权子账号访问CDT

本文介绍了通过RAM的授予子账号权限策略的方法,从而对云数据传输(CDT)进行权限管理。背景信息 使用RAM对CDT进行权限管理前,请先了解以下系统策略:AliyunCDTFullAccess:管理CDT的权限。AliyunCDTReadOnlyAccess:只读访问CDT的权限。...

同步 OceanBase 数据库的数据至 Kafka

本文为您介绍如何使用数据传输同步 OceanBase 数据库的数据至 Kafka。背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台,数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步,扩展消息处理能力,广泛应用...

OceanBase 数据库 MySQL 租户之间的数据同步

前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为 OceanBase 数据库创建专用于数据同步项目的数据库用户,并为其赋予了相关权限。详情请参见 创建数据库用户。使用限制 数据传输仅支持迁移库名、表名和列名...

添加 Oracle 数据源的白名单

操作步骤 如果您添加 Oracle 数据源时,选择实例类型为 VPC 内自建数据库 或 数据库网关,请添加数据传输服务器 IP 至对应数据库的白名单中。因为 VPC 或数据库实例对应的 VPC 可能在 ECS 平台进行访问限制,而作为数据迁移或数据同步的...

新建 RocketMQ 数据

本文为您介绍如何在数据传输中新建 RocketMQ 数据源。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已在 RocketMQ 实例中创建 Group。详情请参见 创建 Group。已在 RocketMQ 实例中创建名称为 oms_test_topic...

使用数据传输同步数据

本文以同步 OceanBase 数据库的数据至 Kafka 为例,介绍如何使用数据传输同步数据。前提条件 在同步数据之前,您需要确认以下信息:数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 OceanBase 数据库创建专用于...

同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...

前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 RDS PostgreSQL 实例创建专用于数据同步项目的高权限账号。详情请参见 PostgreSQL 数据源。已为目标端 OceanBase 数据库 Oracle 租户创建专用于数据...

查询实例操作日志

您可以通过DTS控制台查询...操作步骤 登录 数据传输控制台。在左侧导航栏,单击 操作日志。在 操作日志 页面,您可以通过 实例ID/任务名称、任务类型、操作结果 或 时间 对操作日志进行筛选。说明 默认以操作时间倒序对日志信息进行排序展示。

资源观测

资源观测提供某段时间内,数据传输服务资源组(包括共享资源组和独享资源组)与计算资源组内各类CPU、内存、并发数等资源的使用情况,您可通过观测各指标的曲线图,优化和调整作业的执行计划及资源配置,提高作业的效率和性能。开通地域 ...

SDK正常下载数据过程中突然暂停且不能订阅到数据

问题描述 通过SDK正常下载数据过程中,突然暂停且不能订阅到数据。问题原因 SDK代码中没有调用ackAsConsumed接口汇报消费位点。解决方案 SDK内部设置了8192个Record的缓存空间,如果不调用ackAsConsumed汇报位点,...适用于 数据传输服务DTS

使用DTS进行数据迁移是否会覆盖掉已存在数据

概述 本文介绍使用DTS进行数据迁移是否会覆盖掉已存在数据。详细信息 如果配置迁移任务时,只迁移几个表,那么预检查时,会要求目标库中这些表必须没有数据,如果含有数据库的,那么预检查的“目标库是否为空”项会...适用于 数据传输服务 DTS

RDS MySQL如何实现数据灾备?

RDS MySQL通过数据传输服务(DTS)可以实现主实例和异地灾备实例之间的实时同步。主实例和灾备实例均搭建主备高可用架构,当主实例所在区域发生突发性自然灾害等状况,主实例(Master)和备实例(Slave)均无法连接时,可将异地灾备实例...

数据传输服务(上传)场景与工具

本文为您介绍如何将数据上传至MaxCompute或从MaxCompute下载数据,包括服务连接、SDK、工具和数据导入导出、上云等常见操作。背景信息 MaxCompute提供了多种数据上传下载的...相关文档 关于数据传输服务详情介绍,请参见 数据传输服务概述。

下载和导入同步对象配置

数据传输支持下载数据同步项目的同步对象配置信息,并支持通过导入 CSV 文件的方式实现自动配置和确认同步对象的配置信息,以实现保存项目配置信息和批量、快速配置项目。下载对象配置 新建数据同步项目后,您可以下载同步对象的配置信息。...

修改告警

数据传输支持修改已启动告警监控功能的数据迁移和数据同步项目的告警监控设置。本文以数据迁移项目为例,为您介绍如何修改告警监控。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据迁移。如果您需要设置数据同步...

批量操作数据迁移项目

本文为您介绍如何使用数据传输对数据迁移项目进行批量操作。背景信息 数据传输支持在 迁移项目列表 页面,对数据迁移项目进行批量操作。不同状态的数据迁移项目支持不同的批量操作。数据迁移项目的状态 支持的批量操作 未配置 无 未启动 ...

配置匹配规则

数据传输提供指定对象、导入对象和匹配规则三种方式供您选择。其中匹配规则方式支持您通过编写通配规则指定需要迁移或同步的对象,并且支持配置源端及目标端的对象映射逻辑,通过简单、高效的字符串匹配能力,可以有效地降低您在待迁移/...

查看同步链路状态和性能

说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择数据同步实例所属地域。在 数据同步列表 页面,单击目标实例ID。...

监控任务性能

数据传输服务DTS(Data Transmission Service)提供了任务性能的监控功能,能够展现链路拓扑结构以及相关性能数据。您可以在控制台通过DTS实例获取到任务的链路状态信息和多种性能指标,为您管理任务提供参考依据。操作步骤 登录 数据传输...

如何通过DTS实现同实例下的数据库复制和改名

概述 本文主要介绍如何通过DTS实现同实例下的数据库复制和改名。详细信息 进入 DTS管理控制台。创建迁移任务,源库和目标库都选择同一个RDS实例。...选择要复制和改名的数据库,移动到已选择对象框后,单击 编辑,进行...适用于 数据传输服务 DTS

通过DTS导入数据

通过数据传输服务DTS(Data Transmission Service),您可以将 RDS MySQL 的数据导入至 AnalyticDB MySQL 湖仓版(3.0)或 数仓版(3.0),轻松实现数据的传输,用于实时数据分析。操作方法 您可以选择数据同步或数据迁移任意一种方式,将...

转换计费方式

在左侧导航栏,选择 数据传输(DTS)>数据同步 或 数据传输(DTS)>数据订阅。说明 若您登录的是极简模式的DMS,请在左上角的 中选择 全部功能>集成与开发(DTS)>数据同步 或 全部功能>集成与开发(DTS)>数据订阅。更多信息请参见 自定义...

下载和导入迁移对象配置

数据传输支持下载数据迁移项目的迁移对象配置信息,并支持通过导入 CSV 文件的方式实现自动配置和确认迁移对象的配置信息,以实现保存项目配置信息和批量、快速配置项目。导入对象功能通常适用于百+对象进行批量重命名和设置操作。下载对象...

迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...

本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输将主动...

通过DTS导入数据

通过数据传输服务DTS(Data Transmission Service),您可以将 PolarDB MySQL版 的数据导入至 AnalyticDB MySQL 湖仓版(3.0)或 数仓版(3.0),轻松实现数据的传输,用于实时数据分析。操作方法 您可以选择数据同步或数据迁移任意一种...

引用和清空数据迁移项目配置

在左侧导航栏,单击 数据传输>数据迁移。在 数据迁移 页面,单击未配置的目标项目后的 引用配置。在 引用配置 对话框,从 选择已有项目 下拉列表中,选择需要引用配置的项目名称。说明 选择后,该项目的配置信息将克隆至当前项目。单击 ...

引用和清空数据同步项目配置

在左侧导航栏,单击 数据传输>数据同步。在 数据同步 页面,单击未配置的目标项目后的 引用配置。在 引用配置 对话框,从 选择已有项目 下拉列表中,选择需要引用配置的项目名称。说明 选择后,该项目的配置信息将克隆至当前项目。单击 ...

升级任务的链路规格

选择链路规格,阅读并勾选《数据传输(按量付费)服务条款》。说明 本文介绍通用操作,实际页面可能有差异。关于链路的规格信息,请参见 数据迁移链路规格说明 和 数据同步链路规格说明。如果需要更改同步拓扑,您需要满足相关条件,详情请...

DTS的迁移条件不支持LIMIT子句

问题描述 如果DTS通过过滤条件使用LIMIT子句的方式指定迁移条数则无效。问题原因 DTS不支持指定的迁移条数和LIMIT子句的过滤条件。解决方案 由于DTS产品的迁移条件不支持LIMIT子句,提供以下解决方法供您参考。...适用于 数据传输 DTS

计费常见问题

本文汇总了数据传输服务DTS(Data Transmission Service)计费的常见问题。常见问题 Q:按量付费的计费方式下,手动结束了数据迁移实例或数据同步实例,还会继续收费吗?A:不收费。数据迁移实例仅在增量数据迁移正常运行期间计费(包含...

同步 OceanBase 数据库的数据至 DataHub

前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 OceanBase 数据库创建专用于数据同步项目的数据库用户,并为其赋予了相关权限。详情请参见 创建数据库用户。使用限制 选择全量同步时,数据传输仅支持...

项目管理(新版)

开启成默认数据传输服务资源组 的值为开启时,该项目默认提交的数据传输服务会自动使用数据传输服务(包年包月)资源组。开启成默认数据传输服务资源组 的值为关闭时,该项目默认提交的数据传输服务会自动使用Default资源组。说明 如果需要...

通过DTS导入数据

通过数据传输服务DTS(Data Transmission Service),您可以将 PolarDB分布式版(原DRDS)的数据导入至 AnalyticDB MySQL 湖仓版(3.0)或 数仓版(3.0),轻松实现数据的传输,用于实时数据分析。操作方法 您可以选择数据同步或数据迁移...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 数据库备份 DBS 云数据库 Redis 版 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用