数据传输作业：数据集成
MaxCompute支持通过DataWorks数据集成功能将其他数据源数据同步至MaxCompute，数据集成作业主要有三种类型：离线同步、实时同步、同步解决方案。本文为您介绍MaxCompute数据集成的实现方案。离线同步 离线（批量）的数据通道通过定义数据...
迁移工具
使用DataWorks/DataX、表格存储的通道服务等迁移工具，在不影响业务的情况下您可以实现表格存储数据的全量迁移、增量迁移或者实时同步。本文介绍如何选择迁移工具。迁移工具选择 迁移数据时，请根据实际业务选择合适的迁移工具。表格存储...
通过一键建仓同步至数仓版
您可以通过一键建仓将PolarDB MySQL实例中的数据同步到 AnalyticDB MySQL 集群中，快速创建PolarDB MySQL数据仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。前提条件 已创建PolarDB MySQL集群。更多信息...
通过一键建仓同步至数仓版
您可以在 AnalyticDB MySQL版 控制台上通过一键建仓将一个或多个RDS MySQL实例中的数据同步到 AnalyticDB MySQL 集群中，快速创建RDS MySQL数据仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。前提条件 ...
将表格存储时序表中数据同步到另一个时序表
您可以在数据开发（DataStudio）界面直接创建离线同步节点用于离线（批量）数据周期性同步或者创建实时同步节点用于单表或整库增量数据实时同步。更多信息，请参见 数据集成概述。使用DataWorks数据集成的离线同步任务，您可以将表格存储...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至Hologres。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至 AnalyticDB for MySQL。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，...
查看数据迁移项目的详情
启动数据迁移项目后，您可以在数据迁移项目的详情页面查看相应项目的基本信息、项目执行的进度和状态等信息。进入详情页面 您可以在数据迁移项目的详情页面，查看计划的迁移环节、各个环节的进度和状态，帮助您了解数据库迁移的整体进度，...
下载和导入同步对象配置
数据传输支持下载数据同步项目的同步对象配置信息，并支持通过导入 CSV 文件的方式实现自动配置和确认同步对象的配置信息，以实现保存项目配置信息和批量、快速配置项目。下载对象配置 新建数据同步项目后，您可以下载同步对象的配置信息。...
整库离线同步至Elasticsearch
整库离线同步方案包括周期性全量同步、周期性增量同步、一次性全量同步、一次性增量同步、一次性全量周期性增量同步。本文以一次性全量周期性增量同步至Elasticsearch为例，为您讲解如何将整库数据离线同步至Elasticsearch。前提条件 已...
删除同步任务
删除同步任务 在创建完成同步任务后，不需要使用可以对同步任务进行删除，具体删除步骤如下：切换到数据同步页签，选择所要删除同步任务，点击删除。
同步主实例中的资源
当业务应用在多地域进行主备或多活容灾部署时，为了保证容灾场景下的业务连续性，推荐您使用KMS的跨地域同步功能，即在多个地域分别购买KMS实例（其中1个作为主实例、其他为副本实例）并进行资源同步。本文介绍如何同步主实例中的资源。...
PolarDB MySQL版间的单向同步
通过数据传输服务DTS（Data Transmission Service），您可以实现 PolarDB MySQL版 集群间的单向数据同步。前提条件 已购买源和目标 PolarDB MySQL版 集群，详情请参见 购买按量付费集群。支持的数据库版本，请参见 同步方案概览。源 ...
PolarDB MySQL版间的单向同步
TRUNCATE TABLE 支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。功能限制 不兼容触发器 当同步对象为整个库，且库中的触发器（TRIGGER）会更新库...
账户同步-事件回调
IDaaS 支持与应用之间的...配置完成后，在同步功能启用状态下，您可以：测试连接，验证连接正确、网络通顺、请求能正确处理。一键推送，尝试发起全量同步。为正确接收 IDaaS 发出的事件请求，您需要先对照 账户同步接入概述 完成对接开发。
从RDS MySQL同步至DataHub
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 同步至DataHub，帮助您快速实现使用流计算等大数据产品对数据实时分析。前提条件 DataHub实例的地域为华东1、华东2、华北2或华南1。DataHub...
从PolarDB MySQL版同步至RDS MySQL
TRUNCATE TABLE 支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。功能限制 不兼容触发器 当同步对象为整个库，且库中的触发器（TRIGGER）会更新库...
PolarDB MySQL版间的双向同步
数据传输服务DTS（Data Transmission Service）支持两个 PolarDB MySQL版 集群间的双向数据同步，适用于异地多活、异地容灾等多种应用场景。本文介绍双向数据同步的配置步骤。前提条件 已购买源和目标 PolarDB MySQL版 集群（简称PolarDB...
从RDS MySQL同步至DataHub
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 同步至DataHub，帮助您快速实现使用流计算等大数据产品对数据实时分析。前提条件 DataHub实例的地域为华东1、华东2、华北2或华南1。DataHub...
从ECS上的自建MySQL同步至PolarDB MySQL版
通过数据传输服务DTS（Data Transmission Service），您可以将自建的MySQL数据库同步至 PolarDB MySQL版，本文以ECS上的自建MySQL为例介绍配置流程。前提条件 已创建 PolarDB MySQL版 集群，详情请参见 购买按量付费集群。注意事项 DTS在...
从ECS上的自建MySQL同步至PolarDB MySQL版
通过数据传输服务DTS（Data Transmission Service），您可以将自建的MySQL数据库同步至 PolarDB MySQL版，本文以ECS上的自建MySQL为例介绍配置流程。前提条件 已创建 PolarDB MySQL版 集群，详情请参见 购买按量付费集群。注意事项 DTS在...
使用DTS同步
通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库数据（例如自建MySQL或RDS MySQL）同步到表格存储（Tablestore）实例，轻松实现数据的流转。前提条件 已创建RAM用户并为RAM用户授予AliyunOTSFullAccess权限（管理...
批量操作数据同步项目
本文为您介绍如何使用数据传输对数据同步项目进行批量操作。背景信息 数据传输支持在 同步项目列表 页面，对数据同步项目进行批量操作。不同状态的数据同步项目支持不同的批量操作。数据同步项目的状态 支持的批量操作 未配置 无 未启动 ...
从ECS上的自建MySQL同步至Elasticsearch
通过数据传输服务DTS（Data Transmission Service），您可以将ECS上的自建MySQL同步至Elasticsearch，帮助您快速构建数据。前提条件 已创建目标Elasticsearch实例（5.5、5.6、6.3、6.7或7.x版本），详情请参见 开通阿里云Elasticsearch服务...
网络时间同步助手
本文介绍如何通过函数计算部署网络时间同步助手，实现设备本地时间与网络时间同步。如果您的设备上已经安装了NTP服务，有和云端服务器周期性同步系统时间的能力，则无需操作本文内容。前提条件 本示例仅适用于Link IoT Edge专业版，在开始...
通过一键建仓同步至数仓版
您可以在 云原生数据仓库AnalyticDB MySQL版 控制台上通过一键建仓将一个日志服务项目（Project）中的日志投递到 AnalyticDB MySQL 集群，快速创建日志仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。...
PolarDB PostgreSQL版（兼容Oracle）集群间的单向同步
通过数据传输服务DTS（Data Transmission Service），您可以实现 PolarDB PostgreSQL版（兼容Oracle）集群间的单向数据同步。前提条件 源 PolarDB PostgreSQL版（兼容Oracle）集群需为最新版本，升级方式详情请见 版本管理。源 PolarDB ...
从RDS MySQL同步至Tablestore
通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库（例如自建MySQL或RDS MySQL）同步至Tablestore实例，帮助您轻松实现数据的流转。前提条件 已创建目标表格存储（Tablestore）实例，详情请参见 创建表格存储实例。...
创建同步OSS
准备OSS Bucket DataHub支持将数据同步到对象存储OSS中，在创建同步任务前，用户首先需要在OSS管控台创建OSS Bucket，作为DataHub数据同步的目标Bucket。2.服务关联角色授权 用户配置同步任务时，账号可以选择使用 AccessId/AccessKey 静态...
离线同步数据质量排查
背景信息 讲述数据集成数据同步的原理机制，理解数据同步的过程，进而对数据同步的执行效果有判断能力，判断数据同步效果具体包括：数据同步的数据量、目标端数据实际数量等。同步原理 DataWorks数据集成的同步任务在执行时称之为一个Job，...
钉钉配置
同步类型可以选择手动同步或者自动同步，手动同步是仅同步一次，自动同步会在选择的时间点定时自动触发同步，如果钉钉有人员或部门变动都会同步到网盘 如果钉钉人员离职后，同步程序不会在网盘中删除该用户，只会禁用，需要管理员做好交接...
如何解决增量迁移延迟或同步延迟
本文介绍导致DTS增量迁移延迟或同步延迟过大的常见原因，以及相应的解决方法。您可以逐一排查这些原因，并根据解决方法恢复任务。问题描述 DTS在进行增量任务时，迁移任务或同步任务出现延迟超过1000毫秒的情况。可能原因 原因1：任务规格...
同步字典
当您在DMS发现实例信息不一致时，您可以手动同步字典。如果您在DMS进行数据库结构变更，DMS会自动同步字典，否则需要手动同步字典。背景信息 字典信息用于实现数据库、表、字段、可编程对象的权限分级管控。DMS采集的字典信息包含如下内容...
从自建Oracle同步至DataHub
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 INSERT、UPDATE、DELETE。数据库账号的权限要求 数据库 所需权限 账号创建及...
点表-轨迹表数据同步
点表和轨迹表可以实时同步，但会影响点表的写入性能。手动同步SQL示例：说明 手动同步时，需要在点表上增加一列以标记此点是否已经同步到轨迹表。在点表增加一列标记是否同步，并建立索引 ALTER TABLE sample_points ADD COLUMN sync bool ...
点表-轨迹表数据同步
点表和轨迹表可以实时同步，但会影响点表的写入性能。手动同步SQL示例：说明 手动同步时，需要在点表上增加一列以标记此点是否已经同步到轨迹表。在点表增加一列标记是否同步，并建立索引 ALTER TABLE sample_points ADD COLUMN sync bool ...
点表-轨迹表数据同步
点表和轨迹表可以实时同步，但会影响点表的写入性能。手动同步SQL示例：说明 手动同步时，需要在点表上增加一列以标记此点是否已经同步到轨迹表。在点表增加一列标记是否同步，并建立索引 ALTER TABLE sample_points ADD COLUMN sync bool ...
镜像同步加速
如果跨境同步加速功能不能满足您对同步实例时延的要求，您可以使用自定义同步链路来进一步加快镜像同步速度。说明 公有云Region不支持同步至非公有云 Region（金融云、政务云等）。启用跨境同步加速 登录 容器镜像服务控制台。在顶部菜单栏...
通过整库迁移配置集成任务
离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务，包括MaxCompute、Hive、TDH Inceptor等数据源。本文为您介绍如何新建并配置整库迁移任务。前提条件 已完成所需迁移的数据源创建。整库迁移支持MySQL、...
【邀测】同步备份
本文介绍同步备份功能，同步备份是一项方便、高效的云存储功能，支持 云与本地数据双向实时同步，实现多终端设备数据保持最终一致。功能特点 云-端数据双向同步：在本地存储和编辑的最新文件/文件夹实时同步至云端，云端已上传及更新的文件...
- 产品推荐
- 这些文档可能帮助您