DescribeDatabases
说明 不支持填入多个数据库名称。PageNumber Integer 否 1 页码，取值范围为大于0但不超过Integer最大值的整数，默认值为 1。PageSize Integer 否 30 每页记录数，取值范围如下：30 50 100 默认值为 30。返回数据 名称 类型 示例值 描述 ...
实时数据同步
实时同步功能旨在帮助用户实现两个数据源之间的数据实时同步。可应用于数据异地灾备、...如果需要同步多张表的数据，需要创建多个同步任务。数据同步支持库、表、列名映射，即您可以进行不同库名之间的数据，或两个不同表名之间的数据同步。
数据集成概述
同时针对某些场景，支持整库实时同步全增量同步任务，您可以一次性实时同步多个表。详情请参见 实时数据同步。全增量同步任务简介 实际业务场景下，数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个 离线同步...
数据库管理
Database的概念 每个正在运行的Lindorm时序引擎实例都管理着一个或多个数据库（简称Database）。在各个Database之间，数据会被隔离。每个Database都有若干时序数据表，结合 名词解释 的描述，我们可以对时序引擎的数据层级归纳为下图所示：...
数据同步拓扑介绍
Tair/Redis Tair/Redis MongoDB MongoDB 目前DTS仅支持两个数据库之间的双向同步，暂不支持多个数据库之间的双向同步。说明 关于双向同步的配置案例请参见 MySQL实例间的双向同步。您可以将现有的单向同步升级为双向同步，详情请参见 单向...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
单次同步任务仅支持同步至多10个数据库。当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致...
RDS SQL Server同步至云原生数据仓库AnalyticDB ...
单次同步任务仅支持同步至多10个数据库。当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致...
RDS SQL Server同步至DataHub
单次同步任务仅支持同步至多10个数据库。当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据替换目标表已有数据，在目标表存在多个数据约束的情况下，数据替换可能会替换掉多条目标记录 如果写出数据和目标存储已有数据没有...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
单次同步任务仅支持同步至多10个数据库。当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
单次同步任务仅支持同步至多10个数据库。当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致...
查询一个或多个同步实例状态
调用DescribeSynchronizationJobStatusList查询一个或多个数据同步实例同步状态。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否...
RDS SQL Server同步至RDS MySQL
单次同步任务仅支持同步至多10个数据库。当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致...
设置过滤条件
同步多个前缀 dtsnew,dtsold 只将待同步对象中Key以 dtsnew 和 dtsold 开始的数据同步至目标端。同步和过滤混用 需要同步的前缀 填入：dts 需要过滤的前缀 填入：dtstest 只将待同步对象中Key以 dts 开始，且不以 dtstest 开始的数据同步至...
DataStudio侧实时同步任务配置
如果您需要同步多个表至多个表，除了可以创建多个单表实时同步任务，部分数据源还可以选择配置整库实时同步任务。如果您需要先同步全量数据再将增量数据实时同步至目标端，您可选择同步解决方案。详情请参见：数据集成侧同步任务配置。实时...
API概览
DescribeSynchronizationJobStatusList 查询一个或多个同步实例状态。DescribeSynchronizationJobStatus 查询一个同步实例状态。DeleteSynchronizationJob 释放同步实例。数据订阅 API 描述 CreateSubscriptionInstance 购买订阅实例。...
通过数据同步功能同步SLS数据至数仓版
若您需要同步多个 Logstore，请创建多个数据表。费用说明 该功能目前在免费公测中，公测结束时间为2024年5月15日，公测期间内，通过数据同步功能同步SLS数据时不收取费用。使用流程 步骤一：配置RAM授权（可选）。步骤二：新建数据源。步骤...
通过数据同步功能同步SLS数据至湖仓版
若您需要同步多个 Logstore，请创建多个数据表。费用说明 该功能目前在免费公测中，公测结束时间为2024年5月15日，公测期间内，通过数据同步功能同步SLS数据时不收取费用。使用流程 步骤一：配置RAM授权（可选）。步骤二：新建数据源。步骤...
常见问题
读取MaxCompute（ODPS）表数据时，如何同步多个分区数据？如何处理表列名有关键字导致同步任务失败的情况？读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据。读取Loghub字段映射时读到的字段不符合预期。读取kafka配置了...
BigQuery数据源
否 无 partition 配置分区信息，可以同步特定的分区，支持一次同步多个分区。否 无 splitPk 如果已经指定了分区，则 splitPk 字段不生效。如果指定 splitPk，表示您希望使用 splitPk 代表的字段进行数据分片。数据同步系统会启动并发任务...
离线同步常见问题
读取MaxCompute（ODPS）表数据时，如何同步多个分区数据？如何处理表列名有关键字导致同步任务失败的情况？读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据 读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了...
MaxCompute数据源
读取MaxCompute（ODPS）表数据时，如何同步多个分区数据？MaxCompute如何实现列筛选、重排序和补空等 MaxCompute列配置错误的处理 MaxCompute分区配置注意事项 MaxCompute任务重跑和failover 更多其他数据集成常见问题请参见 数据集成常见...
源为PolarDB-X的任务配置方案
任务配置方案 方案 配置方式 特点总结 方案一 针对 PolarDB分布式版 下的多个RDS MySQL实例，配置多个同步或迁移至目标实例的DTS任务，并且在配置过程中，需将多个RDS MySQL的数据库表名都映射成目标实例的库表名。该方案相比于直接配置 ...
源为PolarDB-X的任务配置方案
任务配置方案 方案 配置方式 特点总结 方案一 针对 PolarDB分布式版 下的多个RDS MySQL实例，配置多个同步或迁移至目标实例的DTS任务，并且在配置过程中，需将多个RDS MySQL的数据库表名都映射成目标实例的库表名。该方案相比于直接配置 ...
使用限制
database数量 一个实例最多创建16个数据库（包含default数据库）。table名称 由大写字母、小写字母、数字、下划线其中的一种或多种组成，最大长度为128个字符。table数量 一个数据库最多创建10000个数据表。tag列名称 可见字符，最大长度为...
开发限制
Partition 16 Table 64 Column Partition Key View Variables Constraint 资源使用限制 资源 类型 数量 逻辑资源 Database 最多包含32个数据库。Table 每个数据库最多包含8192张表。Partition 每张表最多包含8192个分区。Column 每张表最多...
通过Mongo Shell管理数据库账号
enableSharding 允许分片集群实例的数据库在多个Shard节点上分布。admin数据库 readAnyDatabase 对所有数据库的只读权限。readWriteAnyDatabase 对所有数据库的读写权限。userAdminAnyDatabase 在所有数据库下创建账号和角色的权限。...
ALTER DATABASE
第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户可以重命名一个数据库，非超级用户拥有者还必须拥有 CREATEDB 特权。当前数据库不能被...
通过一键建仓同步至数仓版
通过一键建仓一键生成同步链路，将一个或多个日志库中的数据同步到同一个 AnalyticDB MySQL版 集群中。多源汇集。通过一键建仓，可以将RDS、PolarDB MySQL、日志数据便捷地汇集到同一个 AnalyticDB MySQL版 集群。操作步骤 登录 云原生数据...
数据上云场景
数据库数据同步 数据库的数据同步到MaxCompute需要根据数据库的类型和同步策略来选择相应的工具。离线批量的数据库数据同步：可以选择DataWorks，支持的数据库种类丰富，包括MySQL、SQL Server、PostgreSQL等，详情请参见 通过向导模式配置...
通过DMS管理数据库账号
enableSharding 允许分片集群实例的数据库在多个Shard节点上分布。admin数据库 readAnyDatabase 对所有数据库的只读权限。readWriteAnyDatabase 对所有数据库的读写权限。userAdminAnyDatabase 在所有数据库下创建账号和角色的权限。...
T+1多库合并建仓
为保证业务可以继续使用RDS数据库，业务端通常会采用分库分表技术，将一个RDS数据库中的单张表数据拆分到多个数据库的多张表中。上述方案可解决因数据量大而导致的用户体验问题，但在对分库分表数据进行大数据分析时，逻辑上的一个表被拆成...
结构同步
适用于对比、同步多套数据库环境的表结构，例如生产库与测试库、不同的测试库、不同的生产库等。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB MySQL 3.0、其他来源MySQL...
DROP DATABASE
语法 DROP DATABASE[IF EXISTS][catalog_name.]db_name 参数说明 参数 是否必选 说明 catalog_name 否 数据库的Catalog。db_name 是 数据库名，用于唯一识别一个数据库。示例 删除名为mydatabase的数据库。DROP DATABASE mydatabase;返回...
使用MongoShake实现MongoDB实例间的单向同步
支持的数据源 源数据库 目标数据库 ECS上的自建MongoDB数据库 ECS上的自建MongoDB数据库 本地自建的MongoDB数据库 本地自建的MongoDB数据库 阿里云MongoDB实例 阿里云MongoDB实例 第三方云MongoDB数据库 第三方云MongoDB数据库 注意事项 在...
DROP DATABASE
DROP DATABASE用于移除一个数据库。简介 DROP DATABASE 移除一个数据库。它会移除该数据库的系统目录项并且删除包含数据的文件目录。它只能由数据库拥有者执行。当你已经连接到目标数据库时，它不能被执行（连接到 postgres 或者任何其他...
CREATE DATABASE
其他语言环境设置 lc_messages,lc_monetary,lc_numeric,and lc_time 不是每个数据库固定的，也不是由该命令设置的。如果要将它们设置为特定数据库的默认值，则可以使用 ALTER DATABASE.SET.lc_collate 要在新数据库中使用的排序规则顺序...
概览
AnalyticDB PostgreSQL版 提供多种数据迁移方案，可满足不同的数据同步或迁移的业务需求，您可以在不影响业务的情况下，平滑地与各种类型的数据库实例进行迁移或数据同步。迁移数据到AnalyticDB PostgreSQL版 迁移类型 文档 简介 是否支持...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
MySQL实例间的双向同步
同步源数据库 同步目的数据库 RDS MySQL实例 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过数据库网关接入的自建数据库 通过云企业网CEN接入的自建数据库 RDS MySQL实例 ECS上的自建数据库 通过专线、VPN网关或智能...
- 产品推荐
- 这些文档可能帮助您