产品架构
数据源地址动态适配 对于数据订阅及同步链路，容灾系统还会监测数据源的连接地址切换等变更操作，一旦发现数据源发生连接地址变更，它会动态适配数据源新的连接方式，在数据源变更的情况下，保证链路的稳定性。数据迁移工作原理 数据迁移...
迁移时源库为DB2 for LUW的注意事项及限制
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
采集数据
说明 在数据集成同步任务配置前，您可以在DataWorks的 数据源 页面，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，以便在同步任务配置过程中，可通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。本教程提供数据...
数据源管理
连接名称：请输入你要建立的数据源名称。连接类型：支持数据库与Kafka两种类型。数据库引擎：当 连接类型 为数据库时，支持MySQL引擎。当 连接类型 为Kafka时，支持阿里云消息队列Kafka，EMR Kafka，自建Kafka。实例类型：当 连接类型 为...
如何修改备份源数据库
在特殊情况下，您可能需要修改备份计划中备份源数据库，以此使用现有备份计划来备份其他数据库。本文介绍如何修改备份计划中备份源数据库的相关属性。使用场景 原数据库迁移或下线，需切换为新数据库备份。测试阶段结束，需切换为生产数据...
如何使用DataV Proxy
database 数据库名称。port 数据库端口号。以RDS MySQL为例，端口号一般为 3306。测试配置完成的数据源。单击 链接数据库测试，可测试数据库的连通性。单击 SQL测试，可在弹出框中输入SQL语句，测试数据库中的数据是否符合要求。查询日志。...
业务切换流程
Redis CLIENT LIST MongoDB use admin db.runCommand({currentOp:1,$all:[{"active":true}]})说明 上述语句查询到的进程或会话信息中，包含DTS连接源数据库的进程或会话。等待迁移任务的 增量迁移 再次进入 无延迟 状态，保持1分钟或以上，...
业务切换流程
Redis CLIENT LIST MongoDB use admin db.runCommand({currentOp:1,$all:[{"active":true}]})说明 上述语句查询到的进程或会话信息中，包含DTS连接源数据库的进程或会话。等待迁移任务的 增量迁移 再次进入 无延迟 状态，保持1分钟或以上，...
添加Open API数据源
参数 说明 自定义数据源名称 数据源的显示名称，您可以自由命名。EndPoint Open API的服务地址，需要您从云产品的API文档处获取。例如ECS的Open API服务地址为 ecs.aliyuncs.com ，云监控杭州region的Open API 服务地址 为 metrics....
添加及管理监控对象
② 列表区 为您展示 表名称、校验开关、生效/总质量规则数、最近一次校验状态、质量负责人、数据源类型、数据源名称 数据表质量规则详细信息。指标 ① 筛选及搜索区 支持按照指标名称进行模糊搜索。您可以根据 我负责的、校验开关、最近...
添加及管理监控对象
② 列表区 为您展示 表名称、校验开关、生效/总质量规则数、最近一次校验状态、质量负责人、数据源类型、数据源名称 数据表质量规则详细信息。指标 ① 筛选及搜索区 支持按照指标名称进行模糊搜索。您可以根据 我负责的、校验开关、最近...
资产权限审计
方式二：在数据源列表区域（图示③），勾选需要导出权限审计详情的数据源。单击 资产权限审计 下的 导出，即可导出选中数据源的权限审计详情文件至本地（保存为CSV格式）。③ 列表区 为您展示数据对象的名称、环境、权限账号、账号类型、...
资产权限审计
方式二：在数据源列表区域（图示③），勾选需要导出权限审计详情的数据源。单击 资产权限审计 下的 导出，即可导出选中数据源的权限审计详情文件至本地（保存为CSV格式）。③ 列表区 为您展示数据对象的名称、环境、权限账号、账号类型、...
同步时源库为PolarDB MySQL版的注意事项及限制
源实例为PolarDB MySQL版的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：MySQL（RDS MySQL、自建MySQL）...
基本概念
如果同步延迟为0，则源数据库与目标数据库的数据完全同步。数据更新 数据更新是指仅修改数据，未修改结构定义的操作，例如INSERT、DELETE和UPDATE操作。结构更新 结构更新是指修改结构对象定义语法的操作，例如CREATE TABLE、ALTER TABLE、...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
迁移时源库为Redis的注意事项及限制
如果迁移的源数据库类型为Redis，如自建Redis、云数据库Redis版，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为Redis的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及限制：...
使用ClickHouse-Local迁移上云
当您需要优化数据管理、提高数据访问性能和降低数据库维护成本时，您可以将自建数据库迁移至云数据库ClickHouse企业版。云数据库ClickHouse企业版通过ClickHouse-Local工具为您的迁移任务提供了简便且可靠的解决方案。什么是ClickHouse-...
跨实例查询
dbname 源库的数据库名称，此处示例为 db02。创建USER MAPPING，更多关于USER MAPPING的介绍，请参见 CREATE USER MAPPING。CREATE USER MAPPING FOR PUBLIC SERVER remote_adbpg OPTIONS(user 'report',password '*');参数说明。参数 说明...
通过DataWorks导入数据
脚本模式支持添加数据源，此配置项填写的内容必须与新增的数据源名称保持一致。table 需要同步的表名称。必选参数。column 目标表需要写入数据的字段，字段之间用英文逗号分隔。必选参数。例如"column":["id","name","age"]。如果要依次...
多租户管理使用说明
通过租户下的用户连接数据库 通过客户端来连接数据库时，需要将用户指定为 用户名称@租户名称 的形式。示例如下：mysql-host=xxxxxx-u user1@tenant_1-p pwssword 连接成功后，该用户将受到对应租户下的资源限制。查看租户绑定关系 使用高...
常见报错
报错概览 配置备份计划时常见报错 源库测试连接失败 备份恢复预检查时常见报错 源库连接性检查失败 数据库权限检查失败 OSS检查失败 源库binlog开启检查失败 源库binlog模式检查失败 源库binlog_row_image是否为FULL检查失败 源库server_id...
ListDataSource-查询数据源列表
请求参数 名称 类型 必填 描述 示例值 SearchKey string 否 数据源的名称或 ID。sourcename Types array 否 数据源类型的集合。string 否 数据源的类型。MYSQL_PUBLIC SortField string 否 数据源排序的字段，包括 gmtCreate（默认值）和 ...
存储过程
实例内复制数据库 设置数据库在线 数据库全局授权 删除数据库 设置更改跟踪 开启数据库变更捕获 关闭数据库变更捕获 配置实例参数 增加链接服务器Linked Server 设置跟踪标志 更改数据库的名称 Server级别角色授予 关于SQL Server存储过程...
同步时源库为SQL Server的注意事项及限制
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
同步时源库为PostgreSQL的注意事项及限制
源库为PostgreSQL的同步方案概览 根据同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：RDS PostgreSQL 云原生数据仓库AnalyticDB ...
回收磁盘碎片以提升磁盘利用率
在删除云数据库MongoDB实例的数据后，这些被删除数据使用的存储空间会被标记为空闲，随后写入的新数据可能会被直接存储到这部分空闲的存储空间中，也可能会先扩展文件的存储空间再存储到文件末尾。上述情况将导致一部分空闲的存储空间不会...
同步时源库为Redis的注意事项及限制
如果同步的源数据库类型为Redis，如自建Redis、云数据库Redis，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为Redis的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：...
方案概述
由于全量数据迁移会并发执行 INSERT 操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源集群的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN...
配置SQLServer数据源
数据源名称 数据源名称必须以字母、数字、下划线（_）组合，且不能以数字和下划线（_）开头。数据源描述 对数据源进行简单描述，不得超过80个字符。适用环境 可以选择 开发 或 生产 环境。说明 仅标准模式工作空间会显示该配置。地域 选择...
CreateMySqlDataSource-创建 MySQL 数据源
请求参数 名称 类型 必填 描述 示例值 Name string 是 数据源的名称。source_name Type string 是 类型，包括 INTERNET、VPC、RDS、PolarDB 和 DG。VPC VpcId string 否 用户申请公有云 VPC 的唯一 ID。vpc-bp1d2q3mhg9i23ofi*InstanceId ...
方案概述
升级方案概述 PolarDB 支持将RDS PostgreSQL一键升级至 PolarDB PostgreSQL版，升级后的 PolarDB 集群包含源RDS实例的账号信息、数据库、IP白名单。您可以将RDS PostgreSQL迁移至 相同或不同版本 的 PolarDB PostgreSQL版。如RDS ...
创建AnalyticDB for PostgreSQL数据源
参数 说明 数据源名称 定义数据源在DataWorks的名称，名称必须唯一。配置模式 选择阿里云实例模式。所属云账号 定义创建数据源所使用的AnalyticDB for PostgreSQL实例属于当前阿里云主账号还是其他阿里云主账号。当前阿里云主账号：添加...
创建AnalyticDB for MySQL3.0数据源
参数 说明 数据源名称 定义数据源在DataWorks的名称，名称必须唯一。配置模式 选择阿里云实例模式。所属云账号 定义创建数据源所使用的AnalyticDB for MySQL3.0实例属于当前阿里云主账号还是其他阿里云主账号。当前阿里云主账号：添加当前...
创建同步任务
数据源名称 自定义数据源名称。数据源描述 数据源的简单描述。例如，数据源的用途。适用环境 可选择 开发 或 生产 环境。说明 仅标准模式工作空间会显示该配置。地区 选择相应的地域。实例所属账号 选择 当前云账号。RDS实例ID 您可以进入 ...
自建SQL Server通过物理网关迁移上云
为避免此种情况发生，迁移任务完成后，您可手动将恢复模式设置为 Simple，命令如下：ALTER DATABASE 数据库名 SET RECOVERY Simple;操作步骤 在 配置源库及目标库信息 页面，单击 新建物理协议网关 按钮。在弹出的 部署命令 对话框中，选择...
StarRocks数据源
table":"table1","preSql":["truncate table table1"],"postSql":[]},"name":"Writer","category":"writer"} Writer脚本参数 参数 描述 是否必选 默认值 datasource StarRocks数据源名称。是 无 selectedDatabase StarRocks数据库名称。...
自建SQL Server通过物理网关迁移上云
为避免此种情况发生，迁移任务完成后，您可手动将恢复模式设置为 Simple，命令如下：ALTER DATABASE 数据库名 SET RECOVERY Simple;操作步骤 在 配置源库及目标库信息 页面，单击 新建物理协议网关 按钮。在弹出的 部署命令 对话框中，选择...
数据归档至RDS MySQL
说明 系统会自动根据源数据库的库表名称在归档实例上生成库和表，所以此处的目标数据库名称与源库名称相同。归档后的表会新增四列数据，不影响表原始数据的使用：归档信息（工单号和归档时间）数据库名称 表名称 实例ID（DMS录入实例时赋予...
数据归档至PolarDB MySQL版
说明 系统会自动根据源数据库的库表名称在归档实例上生成库和表，所以此处的目标数据库名称与源库名称相同。归档后的表会新增四列数据，不影响表原始数据的使用：归档信息（工单号和归档时间）数据库名称 表名称 实例ID（DMS录入实例时赋予...
- 产品推荐
- 这些文档可能帮助您