MySQL一键实时同步至MaxCompute
您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来控制同步读取和写入的数据库。本实践中创建的数据源名为 doc_mysql1，详情请参见 配置MySQL数据源、配置MaxCompute数据源。说明 数据源相关能力介绍详情请...
设置过滤条件
在配置同步或迁移任务对象时，您可以通过设置过滤条件，将源数据库中满足您需求的数据同步或迁移到目标数据库。该功能常应用于分库分表、同步或迁移部分数据等场景。前提条件 当前任务处于 配置任务对象及高级配置 阶段。进入此阶段的方法...
同步时源库为PostgreSQL的注意事项及限制
源库为PostgreSQL的同步方案概览 根据同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：RDS PostgreSQL 云原生数据仓库AnalyticDB ...
常见问题
读取MaxCompute（ODPS）表数据时，如何同步多个分区数据？如何处理表列名有关键字导致同步任务失败的情况？读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据。读取Loghub字段映射时读到的字段不符合预期。读取kafka配置了...
PolarDB PostgreSQL版（兼容Oracle）集群同步至...
如同步对象为表级别，且需进行编辑（如表列名映射），则单次同步任务待同步的表数量超过1000时，建议您拆分待同步的表，分批配置为多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。需开启WAL日志。如为增量同步任务...
EMR Kafka磁盘故障运维
lsof+D/mnt/disk7 如果发现句柄长时间（半个小时以上）无法释放，则可以通过控制台重启对应Broker服务。执行以下命令，卸载故障磁盘目录。umount/mnt/disk7 修改 log.dirs 配置并重启服务。在EMR控制台，修改恢复后的Broker节点级别的 log....
同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
如果开启，请设置 RPS（全量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制）和 BPS（全量同步阶段每秒最多可以同步至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量同步实际可以达到的...
创建同步MaxCompute
查看同步任务 可以点击对应connector的详情页面查看同步任务的运行状态和点位等信息，包含同步点位、同步状态以及重启和停止等操作，如下图所示：同步示例 1.USER_DEFINE同步模式 建立DataHub Topic 备注：topic schema中必须需要包含...
常见问题
因为数据同步具有更多的高级特性，例如支持在线调整同步对象、支持配置MySQL数据库之间的双向数据同步；且数据同步基于内网传输，可以保证更低的网络延时。账户欠费有什么影响？账户欠费的影响，请参见 到期或欠费说明。如何提前释放包年...
Kibana FAQ
可能原因 解决方法 存在多个Kibana系统索引或者数据结构发生了变化 删除.kibana 开头的相关索引，并通过控制台重启Kibana节点，或者重启Elasticsearch实例，重启操作请参见 重启实例或节点。警告 删除.kibana 索引后，会丢失Kibana中已创建...
快速入门
步骤一：开通DataHub服务 登录 DataHub服务控制台。...步骤六：查看同步任务 可以点击对应connector的详情页面查看同步任务的运行状态和点位等信息，包含同步点位、同步状态以及重启和停止等操作，如下图所示：详情请参看 同步MaxCompute。
RDS PostgreSQL同步至AnalyticDB for PostgreSQL
注意事项 一个数据同步作业只能同步一个数据库，如果有多个数据库需要同步，则需要为每个数据库创建数据同步作业。在数据同步的过程中，如果要将源库中创建的新表作为同步对象，您需要对该表执行如下操作以保障该表数据同步的一致性。ALTER...
从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...
注意事项 一个数据同步作业只能同步一个数据库，如果有多个数据库需要同步，则需要为每个数据库创建数据同步作业。在数据同步的过程中，如果要将源库中创建的新表作为同步对象，您需要对该表执行如下操作以保障该表数据同步的一致性。ALTER...
从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...
注意事项 一个数据同步作业只能同步一个数据库，如果有多个数据库需要同步，则需要为每个数据库创建数据同步作业。在数据同步的过程中，如果要将源库中创建的新表作为同步对象，您需要对该表执行如下操作以保障该表数据同步的一致性。ALTER...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
如果开启，请设置 RPS（增量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制）和 BPS（增量同步阶段每秒最多可以同步至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，增量同步实际可以达到的...
OceanBase 数据库之间的数据迁移
在未开启同步 DDL 的情况下，如果您变更目标端的唯一索引，需要重启数据迁移项目，否则可能存在数据不一致的问题。如果数据迁移项目未启用正向切换，请删除目标端数据库对应的唯一索引和伪列。如果不删除唯一索引和伪列，会导致无法写入...
管理共享
本文介绍如何在云存储网关控制台上管理共享，包括创建共享、设置NFS共享、设置SMB共享、删除共享等操作。前提条件 已创建云存储网关。更多信息，请参见 创建文件网关。已添加缓存。更多信息，请参见 添加缓存。已创建OSS Bucket，更多信息...
配置Kafka输入
实时同步Kafka输入节点不依赖Kafka服务端维护的群组信息管理位点，所以对配置参数中 group.id 的设置不会影响同步任务启动、重启、Failover等场景下的读取位点。输出字段 您可以自定义Kafka数据对外输出的字段名：单击 添加更多字段，输入 ...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
在未开启同步 DDL 的情况下，如果您变更目标端的唯一索引，需要重启数据迁移项目，否则可能存在数据不一致的问题。如果数据迁移项目未启用正向切换，请删除目标端数据库对应的唯一索引和伪列。如果不删除唯一索引和伪列，会导致无法写入...
本地盘实例运维场景和系统事件
说明 必须在ECS控制台重启实例或调用API RebootInstance，在实例内部重启无效。等待系统自动重启实例。您检查实例和应用是否正常。SystemMaintenance.Reboot支持的事件状态，请参见 ECS系统事件汇总。典型的事件状态变化示意图，请参见 ...
产品优势
数据实时同步支持两个数据源之间的单向/双向同步，适用于数据异地灾备、异地多活、应用就近访问、查询报表分流、实时数据仓库等应用场景。为降低数据迁移对应用的影响，数据迁移功能支持不停服迁移，可实现在数据迁移过程中，应用停机时间...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
如果开启，请设置 RPS（增量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制）和 BPS（增量同步阶段每秒最多可以同步至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，增量同步实际可以达到的...
CREATE DATABASE AS（CDAS）语句
CDAS支持整库级别的表结构和数据的实时同步，还支持表结构变更的同步。本文为您介绍CREATE DATABASE AS（CDAS）的使用方法，并提供了多种使用场景下的示例。背景信息 CDAS是 CTAS 语法的一个语法糖，用于实现整库同步、多表同步的功能。...
Db2 for LUW同步至自建Kafka集群
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 准备工作 创建账号并授予...
MySQL实例间的双向同步
如同步对象为单个或多个表（非整库），那么在数据同步时，勿对源库的同步对象使用pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。您可以使用数据管理DMS（Data Management）来执行在线DDL变更，请参见 不锁表结构...
MySQL实例间的双向同步
如同步对象为单个或多个表（非整库），那么在数据同步时，勿对源库的同步对象使用pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。您可以使用数据管理DMS（Data Management）来执行在线DDL变更，请参见 不锁表结构...
RDS PostgreSQL间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个PostgreSQL数据库之间（比如RDS PostgreSQL、自建PostgreSQL）的双向数据实时同步，RDS PostgreSQL 实例间的双向同步，适用于异地多活（单元化）、数据异地容灾等多种应用场景。...
RDS PostgreSQL间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个PostgreSQL数据库之间（比如RDS PostgreSQL、自建PostgreSQL）的双向数据实时同步，RDS PostgreSQL 实例间的双向同步，适用于异地多活（单元化）、数据异地容灾等多种应用场景。...
管理全局命名空间
同步ASM实例与数据平面集群的自动注入标签 通过ASM控制台或者使用ASM KubeConfig定义的命名空间隶属于ASM实例本身，与该ASM管理的数据平面集群相互独立。您可以将ASM实例的命名空间及其自动注入标签同步至数据平面集群，也可以将数据平面...
RDS MySQL同步至阿里云消息队列Kafka版
如同步对象为单个或多个表（非整库），那么在数据同步时，勿对源库的同步对象使用pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。您可以使用数据管理DMS（Data Management）来执行在线DDL变更，请参见 不锁表结构...
自建PostgreSQL同步到云原生数据仓库AnalyticDB ...
同步过程中，如果对源库中的同步对象执行了DDL操作，需要手动在目标库中执行对应的DDL操作，然后重启数据同步作业。支持同步的SQL操作 INSERT、UPDATE、DELETE。准备工作 根据自建PostgreSQL中待同步对象的结构，在目标 云原生数据仓库...
自建PostgreSQL同步到云原生数据仓库AnalyticDB ...
同步过程中，如果对源库中的同步对象执行了DDL操作，需要手动在目标库中执行对应的DDL操作，然后重启数据同步作业。支持同步的SQL操作 INSERT、UPDATE、DELETE。准备工作 根据自建PostgreSQL中待同步对象的结构，在目标 云原生数据仓库...
雷达图
轴标题：雷达图的半径轴轴标题样式，可单击 图标控制半径轴轴标题的显隐。参数 说明 标题显示 轴标题显示的文字内容。展示方式 轴标题的展示方式，包括标题的角度值和标题的偏移值。文本样式 轴标题文本的字体样式、文字粗细、字号和颜色。...
基于Logstash迁移OSS数据
触发阿里云消息服务MNS（Message Notification Service）事件通知时，您可以通过阿里云Logstash的logstash-input-oss插件获取OSS变更事件，再通过logstash-output-oss插件将数据同步到OSS Bucket中。本文介绍对应的配置方法。前提条件 您已...
区域图
轴标题：区域图的X轴轴标题样式，可单击 图标控制X轴轴标题的显隐。参数 说明 标题显示 轴标题显示的文字内容。展示方式 轴标题的展示方式，包括标题的角度值和标题的偏移值。文本样式 轴标题文本的字体样式、文字粗细、字号和颜色。轴标签...
区域图
轴标题：区域图的X轴轴标题样式，可单击 图标控制X轴轴标题的显隐。参数 说明 标题显示 X轴轴标题显示的文字内容。展示方式 X轴轴标题的展示方式，包括标题的角度值和标题的偏移值。文本样式 X轴轴标题文本的字体样式、文字粗细、字号和...
折线图
轴标题：折线图的X轴轴标题的样式，可单击 图标控制X轴轴标题的显隐。参数 说明 标题显示 X轴轴标题显示的文字内容。展示方式 X轴轴标题的展示方式，包括标题的角度值和标题的偏移值。文本样式 X轴轴标题文本的字体样式、文字粗细、字号和...
修改实例参数
控制台上 可修改参数 页签中的 是否重启 列为 是 的参数提交修改后，DTS会立即重启模块，因此建议您在业务低峰期修改实例参数。选择实例 数据同步和数据迁移实例修改参数的步骤相似，本操作以修改同步实例的参数为例进行介绍。进入同步任务...
查询子实例间的同步延迟
在使用过程中，您可以随时查询子实例的同步状态、同步延迟和同步数量，掌握同步链路的实时情况。前提条件 Tair 全球多活实例中至少包含2个子实例。关于如何添加子实例，请参见 为分布式实例添加子实例。操作步骤 登录 Tair管理控制台。在...
查询子实例间的同步延迟
在使用过程中，您可以随时查询子实例的同步状态、同步延迟和同步数量，掌握同步链路的实时情况。前提条件 Redis 全球多活实例中至少包含2个子实例。关于如何添加子实例，请参见 为分布式实例添加子实例。操作步骤 登录 Redis管理控制台。在...
- 产品推荐
- 这些文档可能帮助您