同步 OceanBase 数据库的数据至 Kafka
本文为您介绍如何使用数据传输同步 OceanBase 数据库的数据至 Kafka。背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台，数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步，扩展消息处理能力，广泛应用...
新增脚本同步任务
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
数据集成侧同步任务能力说明
DataWorks为您提供多种数据源之间进行不同数据同步场景的全增量同步任务，包括实时数据同步、离线全量同步、离线增量同步等同步场景，助力企业数据更高效、更便捷的一键上云。背景信息 实际业务场景下，数据同步通常不能通过一个或多个简单...
为什么云存储网关与OSS上的文件不一致
基于消息通知的极速同步 针对常规反向同步的痛点问题，基于消息通知的极速同步采用 全量同步+增量更新 的结合的方案进行OSS与云存储网关元数据的同步，以 秒级快速同步OSS的变化。当配置好极速同步组后，您在详情页中可以看到当前全量同步...
同步时源库为MongoDB的注意事项及限制
源库为MongoDB的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：MongoDB（副本集架构）同步至MongoDB（副本集架构、分片集群架构）MongoDB（分片集群架构）间双向同步 MongoDB（分片集群架构）间单向同步 MongoDB（副本集...
PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步
双向同步实例包含正向和反向同步任务，在配置或重置双向同步实例时，若其中一个任务的目标对象是另一个任务待同步的对象：仅允许其中一个任务同步全量和增量数据，另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
从ECS上的自建MySQL同步至RDS
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 级联单向同步 一对一双向同步 说明 如需实现双向同步，请参见 MySQL实例间的双向同步。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ...
同步 OceanBase 数据库的数据至 DataHub
本文为您介绍如何同步 OceanBase 数据库（MySQL 和 Oracle 租户）的数据至 DataHub。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 OceanBase 数据库创建专用于数据同步项目的数据库用户，并为其赋予...
同步时源库为SQL Server的注意事项及限制
如果同步的源数据库类型为SQL Server，如自建SQL Server、RDS SQL Server，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为SQL Server的同步方案概览 根据同步方案，查看同步任务的注意...
Redis数据同步方案概览
场景 工具 配置案例 从自建库同步至云数据库Redis DTS 从自建Redis集群同步至Redis集群实例 从ECS上的自建Redis同步至Redis实例 从ECS上的Codis集群同步至Redis实例 从ECS上的Twemproxy Redis集群同步至Redis实例 云数据库Redis间同步 DTS ...
查看和修改同步参数配置
本文为您介绍如何查看和修改数据同步项目的参数配置。查看参数配置 处于 运行中、修改中、合并中、已完成、结束中 和 已结束 状态的数据同步项目，支持查看参数配置。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据同步。在...
启动和暂停数据同步项目
启动数据同步项目 创建数据同步项目时，如果在预检查完成后仅保存该数据同步项目，未进行启动，则需要在同步项目列表中手动启动数据同步项目。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据同步。在 同步项目列表 页面，...
从ECS上的自建MySQL同步至RDS
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 级联单向同步 一对一双向同步 说明 如需实现双向同步，请参见 MySQL实例间的双向同步。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ...
API 同步
查看用户和组织同步结果 在开启用户和组织同步的情况下，打开 API 同步集成详情页面，可以查看最新同步结果：未执行同步、同步成功、同步失败、部分同步成功。关闭用户和组织同步 在 API 同步集成详情页中，已经开启用户和组织同步的情况下...
设置增量同步位点
使用限制 您在创建数据迁移或数据同步项目时，迁移/同步类型选择了 增量同步，并且未选择 全量迁移/全量同步，才会支持设置增量同步位点。设置增量同步位点时，仅支持选择当前时间或当前时间之前的时间点，并且不能晚于您设置的源端数据库...
上线离线数据同步任务
新增离线数据同步任务后，需对任务进行上线操作，同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务，具体操作，请参见 新增离线数据同步任务、批量新增离线数据...
钉邮绑定和通讯录同步
同步Excel上传同步完成后，后续同步以钉钉侧为准，即钉钉侧增删改部门会同步至邮箱侧，邮箱侧不会同步至钉钉侧（不论之前同步选的基准是哪一侧）。3）钉钉侧删除部门，如果邮箱侧对应部门下有账号，则邮箱部门不会同步删除。钉钉&邮箱账号...
功能概览
阿里云 云备份 提供非结构化文件系统类数据同步功能，可以将源端数据源（包括NAS、HDFS、S3兼容存储、对象存储OSS、CPFS、OSS协议兼容存储等）同步至目的端数据源（包括阿里云上）。本文介绍 云备份 的数据同步功能概览，包括数据同步的...
单向同步升级至双向同步
为满足业务需求，您可以通过DTS控制台将同步拓扑从单向同步升级为双向同步。前提条件 数据同步作业的源实例和目标实例的数据库类型均为 MySQL。数据同步作业的同步拓扑为 单向同步。数据同步作业的状态为 运行中。注意事项 同步实例只能从...
数据同步流程
数据传输提供数据同步功能，帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...
功能简介
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、...
数据导出到OSS概述
实现原理 DataWorks数据集成的离线同步功能将不同数据源的同步抽象为从来源数据源读取数据的Reader插件以及向目标数据源写入数据的Writer插件，方便您通过定义来源与去向数据源并结合DataWorks调度参数使用，将来源数据源中的全量或增量...
操作流程
数据同步主要内容包括数据源配置、获取物理表、创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 配置数据同步的源端和目标端。数据同步的源端，是数据同步任务的起点。数据同步目标端是同步的终点...
管理数据同步任务和存储表
添加并开启云产品数据源同步任务后，您可查看对应同步任务的详细信息，包括同步状态、数据同步存储表、同步任务运行信息等。您也可根据需要在数据同步存储表中新增字段。本文介绍如何查看云产品数据源的同步任务和数据同步存储表。查看同步...
网站表单
表单属于数据收集性质，可收集来自网站用户的数据，方便企业了解用户诉求。本文旨在介绍如何进入设计表单页面及查看表单数据。进入设计表单页面：单击 进入设计>表单 即可进入设计表单页面。添加表单控件：在表单设计制作完成后，在设计...
一键实时同步至Hologres
操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建...
网站表单
表单属于数据收集性质，可收集来自网站用户的数据，方便企业了解用户诉求。本文旨在介绍如何进入设计表单页面及查看表单数据。进入设计表单页面：单击 进入设计>表单 即可进入设计表单页面。添加表单控件：在表单设计制作完成后，在设计...
一键实时同步至DataHub
一键实时同步至DataHub方案支持全增量一体化同步，先进行全量数据迁移，然后再实时同步增量数据至目标端。本文为您介绍如何创建一键实时同步至DataHub任务。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步...
云数据库MongoDB版（副本集架构）间的双向同步
双向同步实例包含正向和反向同步任务，在配置或重置双向同步实例时，若其中一个任务的目标对象是另一个任务待同步的对象：仅允许其中一个任务同步全量和增量数据，另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
同步 API
同步 API 可将当前环境中的 API 同步至其他环境中。为保证系统稳定性，只同步目标环境不存在的 API 配置。同步后，会自动加载配置使其生效。操作步骤 登录 mPaaS 控制台，在左侧导航栏，点击 移动网关 菜单。在 API 管理 标签页中，点击 更...
项目模板同步配置
模板的同步开启/关闭 在创建模板后，服务同步配置如下：服务 同步配置 项目字段 默认开启同步，不可关闭。项目状态 默认开启同步，可关闭。自动化规则 默认开启同步，可关闭。通知 默认不开启同步，不可开启。角色权限 默认不开启同步，不...
同步时源库为PostgreSQL的注意事项及限制
源库为PostgreSQL的同步方案概览 根据同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：RDS PostgreSQL 云原生数据仓库AnalyticDB ...
库表同步
库表同步 中的模板如下所示：检测点 模板 结构同步校验「结构同步」设置测试库同步免批「结构同步」关闭SQL执行能力「结构同步」关闭线上库的SQL执行能力「结构同步」设置线上库同步的审批流程 影子表同步校验「影子表同步」设置测试库同步...
新增脚本同步任务
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
RDS MariaDB实例间的同步
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 一对一双向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ALTER ...
2023年
RDS MySQL同步至函数计算FC 云数据库MongoDB版（副本集架构）同步至函数计算FC 云数据库MongoDB版（分片集群架构）同步至函数计算FC 新增 新增支持PolarDB MySQL同步或迁移至ClickHouse。PolarDB MySQL版同步至ClickHouse集群 PolarDB ...
从ECS上的自建MySQL同步至PolarDB MySQL版
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例为 MySQL、目标实例...
从ECS上的自建MySQL同步至PolarDB MySQL版
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例为 MySQL、目标实例...
通过一键建仓同步至数仓版
您可以通过一键建仓将PolarDB MySQL实例中的数据同步到 AnalyticDB MySQL 集群中，快速创建PolarDB MySQL数据仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。前提条件 已创建PolarDB MySQL集群。更多信息...
通过一键建仓同步至数仓版
您可以在 AnalyticDB MySQL版 控制台上通过一键建仓将一个或多个RDS MySQL实例中的数据同步到 AnalyticDB MySQL 集群中，快速创建RDS MySQL数据仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。前提条件 ...
- 产品推荐
- 这些文档可能帮助您