空库初始化
数据管理DMS 的空库初始化功能支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、PolarDB MySQL版、...
使用须知
Table：与数据库中的表相对应。了解Lindorm计算引擎SQL 根据您已开通的引擎类型（即宽表引擎、时序引擎、搜索引擎或者文件引擎等），Lindorm计算引擎为您新增对应的数据源（Catalog）。您可以使用 SHOW CATALOGS 语句来查看当前可以使用的...
从PolarDB MySQL版同步至PolarDB-X
云原生分布式数据库 PolarDB-X 是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品，高度兼容MySQL协议和语法，支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离，具备数据库全生命周期运维管控能力。...
从RDS MySQL同步至PolarDB-X
介绍云原生分布式数据库 PolarDB-X（简称PolarDB-X）是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品，高度兼容MySQL协议和语法，支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离，具备数据库全生命周期...
数据迁移与同步FAQ
对比项 DTS数据迁移 DTS数据同步 适用场景 主要用于迁移数据上云，例如将本地数据库、ECS上的自建数据库或第三方云数据库迁移至阿里云Redis实例。主要用于两个Redis数据库之间的数据实时同步，例如从实例A同步至实例B。可用于异地多活、...
ACL权限体系
以下列出AnalyticDB for MySQL 2.0的权限对象和各对象权限：Database（库），即 db_name.*或*（默认数据库），指定数据库或数据库上所有表/表组。TableGroup（表组），即 db_name.table_group_name 或 table_group_name，特定表组。Table...
数据同步流程
您已为源端和目标端创建专用于数据同步的数据库用户，并赋予其相关权限。详情请参见 创建数据库用户。新建数据源。在 数据传输>管理数据源 页面，分别新建源端和目标端的数据源。详情请参见 新建数据源 模块的文档。购买数据同步项目。根据...
概述
使用限制 开启SQL防火墙功能后，Proxy会在您当前的集群中创建一个数据库 database:proxy_auditing 和两张表，其中，sql_list 表用于保存黑白名单规则中的参数化SQL语句，org_sql_list 表用于保存黑名单规则中具体的SQL语句。且每张表最多...
数据集成概述
背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优（例如容错，限速，并发）等。...
导出数据
本文将为您介绍如何导出表结构、SQL查询结果集、整个数据库。前提条件 数据库关联的安全规则已开启 结果集是否支持导出 规则（系统默认开启）。更多信息，请参见 SQL窗口-关系型数据库。具有目标数据库的查询、导出等权限。更多信息，请...
通过Kafka导入数据
database.server.name=test123#需要同步的数据库和表，默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 ...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
新增多表实时任务
已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，具体操作，请参见 添加任务目录。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标...
新增多表实时任务
已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，具体操作，请参见 添加任务目录。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组...
DataX
当节点执行SQL时会自动解析SQL查询的列名，并将其映射为目标表的同步列名。当源表和目标表的列名不一致时，可以通过使用列别名（AS）来进行转换。目标源类型 选择同步数据的数据源类型。目标源实例 选择在 数据源中心 中创建的目标数据源，...
数据同步方案概览
数据同步 使用场景 文档链接 PolarDB 间的数据同步 PolarDB MySQL集群间的单向同步 PolarDB MySQL集群间的双向同步 PolarDB 与其它数据库的数据同步 RDS MySQL同步至PolarDB MySQL集群 PolarDB MySQL同步至RDS MySQL 从PolarDB MySQL同步至...
迁移数据库账号
使用DTS同步或迁移数据的库表结构。即在 配置任务对象及高级配置 阶段中，同步类型 勾选了 库表结构同步 或者 迁移类型 勾选了 库表结构迁移。...grant SELECT on mysql.db...后续步骤，请参见 RDS MySQL实例间的同步 和 RDS MySQL实例间的迁移。
Babelfish简介
Single-DB模式 架构图：说明：该模式下，babelfish_db数据库中用户数据库的Schema名称与SQL Server中的相同。例如：通过TDS端口创建数据库DB_A，然后在DB_A下创建schema_A。在PostgreSQL的babelfish_db数据库中，Schema名称为：dbo和schema...
添加RDS for SQLServer数据源
因此您需要通过数据库产品的OPEN API获取DataV需要的VPC实例ID，通常为数据库实例详情中的VpcCloudInstanceId或VpcInstanceId，具体数据库产品获取VPC实例ID的接口，请参见 RDS for SQL Server获取VPC实例ID接口。SQL Server版本 可选，当...
添加RDS for SQLServer数据源
本文为您介绍在DataV中通过内网和外网添加RDS for SQLServer数据源的方法。前提条件 已准备好待添加的RDS for SQLServer数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型...
PolarDB-X 2.0同步至Tablestore
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
从PolarDB MySQL版同步到Kafka
配置 说明 数据库表名称 设置源表同步到的目标Topic名称。说明 如果设置的Topic名称在目标Kafka集群中不存在，您还需要设置该Topic的Partition数量。过滤条件 过滤条件支持标准的SQL WHERE语句（仅支持=、!和>操作符），只有满足WHERE条件...
从PolarDB MySQL版同步到Kafka
配置 说明 数据库表名称 设置源表同步到的目标Topic名称。说明 如果设置的Topic名称在目标Kafka集群中不存在，您还需要设置该Topic的Partition数量。过滤条件 过滤条件支持标准的SQL WHERE语句（仅支持=、!和>操作符），只有满足WHERE条件...
从RDS MySQL同步至DataHub
如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等），DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单中；如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添...
从PolarDB MySQL版同步至Datahub
说明 如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP...
新建 MySQL 数据源
数据库实例 从 数据库实例 下拉列表中，选择目标数据库实例。公网 IP 自建数据库 主机 IP 数据库宿主机的 IP。端口 数据库宿主机 IP 的端口号。共有参数 数据源标识 建议使用中文、数字和字母的组合。名称中不能包含空格，长度限制为 32 个...
配置Microsoft SQL Server输入组件
同步Microsoft SQL Server数据源的数据至其他数据源的场景中，您需要先配置Microsoft SQL Server输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Microsoft SQL Server输入组件。前提条件 在开始执行操作前，请...
从RDS MySQL同步至DataHub
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
pg_database
目录 pg_database 存储有关可用数据库的信息。数据库通过CREATE DATABASE命令创建。和大部分系统目录不同，pg_database 是在集簇的所有数据库之间共享的：在一个集簇中只有一份 pg_database 拷贝，而不是每个数据库一份。列名称 列类型 ...
配置ClickHouse输出组件
阿里云数据库ClickHouse创建数据表的操作，请参见 创建表；非阿里云数据库ClickHouse创建数据表的操作，请参见 ClickHouse官方文档。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引，进入 ...
新建 Oracle 数据源
数据库实例 从 数据库实例 下拉列表中，选择目标数据库实例。公网 IP 自建数据库 主机 IP 数据库宿主机的 IP。端口 数据库宿主机 IP 的端口号。共有参数 数据源标识 建议使用中文、数字和字母的组合。名称中不能包含空格，长度限制为 32 个...
配置Microsoft SQL Server输入组件
同步Microsoft SQL Server数据源的数据至其他数据源的场景中，您需要先配置Microsoft SQL Server输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Microsoft SQL Server输入组件。请参见 通过离线单条管道配置集成...
从PolarDB MySQL版同步至Datahub
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
查看数据同步项目的详情
平均执行时间、平均提交时间 重要 仅同步 OceanBase 数据库 MySQL 租户的数据至 AnalyticDB MySQL，以及同步 OceanBase 数据库的数据至 OceanBase 数据库时进行统计。平均执行时间：每条 SQL 执行时间的均值，单位为 ms。平均提交时间：...
RDS for SQL Server如何回收表空间
语法如下所示：DBCC CLEANTABLE({ database_name|database_id|0 },{ table_name|table_id|view_name|view_id }[,batch_size])[WITH NO_INFOMSGS]说明如下：语句 描述 database_name|database_id|0 待清除的表所在的数据库。如果指定0，则...
配置ClickHouse输出组件
阿里云数据库ClickHouse创建数据表的操作，请参见 创建表；非阿里云数据库ClickHouse创建数据表的操作，请参见 ClickHouse官方文档。操作步骤 请参 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引，进入 ClickHouse...
RDS for SQL Server如何回收表空间
语法如下所示：DBCC CLEANTABLE({ database_name|database_id|0 },{ table_name|table_id|view_name|view_id }[,batch_size])[WITH NO_INFOMSGS]说明如下：语句 描述 database_name|database_id|0 待清除的表所在的数据库。如果指定0，则...
mysqldump
db-tables test_table-no-data 导出test_db1、test_db2数据库中所有表：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-databases test_db1 test_db2 导出所有数据库和表：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-all-...
管理迭代
空库初始化 将源库的表结构同步至空数据库中。说明 数据库只有同时符合以下条件才可以被选择：在迭代的可选数据库列表内。数据库环境类型符合迭代模板的定义。完成一个阶段的所有工单操作后，单击 推进到下一阶段，单击 确认，推进迭代到下...
- 产品推荐
- 这些文档可能帮助您