RDS PostgreSQL间的单向同步
若源库单次提交的多条SQL中包含非同步对象的DDL，则该DDL不会被同步。重要 仅正向任务（即源库同步至目标库）支持同步DDL，反向任务（即目标库同步至源库）不支持同步DDL，将自动过滤DDL操作。操作步骤 登录 新版DTS同步任务的列表页面。...
DTS同步任务源库和目标库使用SSL安全链接
DTS实例的任务类型为非同步类型不适用本规则，视为“不适用”。规则详情 参数 说明 规则名称 DTS同步任务源库和目标库使用SSL安全链接 规则标识 dts-instance-sync-job-ssl-enabled 标签 DTS，Instance 自动修正 不支持 规则触发机制 周期...
阿里邮箱AD同步&认证
五、小技巧 如果同步出现较严重延迟，过了很久部门账号或邮件组都没同步至邮箱侧，建议刷新AD对象的任意非同步认证相关的关键属性值来触发同步。如果涉及到对象比较多，也可以通过如下指令进行批量操作。方案1：直接打开cmd命令框 csvde-f ...
修改全局默认日历
中国（同步更新）：根据中国国家日历同步非工作日信息。美国：根据美国国家日历同步非工作日信息。工作时间 设置工作时间范围。单击 确定。重置日期时间。单击 新建 重置。在 重置日期时间 对话框中，设置如下参数。参数 说明 日期 选择...
MySQL分库分表实践
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
整库离线同步至OSS
整库离线同步方案包括周期性全量同步、周期性增量同步、一次性全量同步、一次性增量同步、一次性全量周期性增量同步。本文以一次性全量周期性增量同步至OSS为例，为您讲解如何将整库数据离线同步至OSS。前提条件 已完成数据源配置。您需要...
将表格存储数据表中数据同步到另一个数据表
使用通道服务、DataWorks或者DataX将表格存储数据表中的数据同步到另一个数据表。前提条件 已创建目标数据表，目标数据表的列必须与源数据表中待迁移的列一一对应。具体操作，请参见 创建数据表。说明 如果要实现跨账号、跨地域数据迁移，...
将表格存储时序表中数据同步到另一个时序表
使用DataWorks工具将表格存储（Tablestore）时序表中的全量数据或者增量数据同步到另一个时序表。背景信息 表格存储支持对时序数据进行存储与查询，在某些场景下，您可能希望将时序表中的时序数据迁移到另一个时序表中。说明 关于表格存储...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
同步增量数据到MaxCompute
如果需要将 表格存储 中新增和变化的数据定期同步到MaxCompute中备份或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现周期性增量数据同步。前提条件 已新增 表格存储 数据源。具体操作，请参见 注意事项。已...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
Landing Zone搭建概述
Landing Zone是阿里云的企业上云框架，可以指导企业规划和落地云上的资源结构、访问安全、网络架构和安全合规体系，为企业搭建安全、高效和可管理的云环境。云治理中心基于大量的最佳实践，通过蓝图模板的形式，帮助您一站式轻松搭建...
增量数据同步
通过选择已注册的数据源端数据和目标端，实现增量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心（xxzx）”，具体操作，请参见 新建工作...
同步 OceanBase 数据库 MySQL 租户的数据至 Analytic...
同步类型包括 结构同步、全量同步 和 增量同步，增量同步 包括 DML 同步 和 DDL 同步，您可以根据需求进行自定义配置。详情请参见 自定义配置 DDL/DML。DML 同步 包括 Insert、Delete 和 Update，默认全部勾选。DDL 同步 支持 ADD COLUMN ...
通过数据同步功能同步SLS至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建SLS同步链路，通过同步链路从指定时间位点将日志服务LogStore中的数据实时同步至 湖仓版（3.0），以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源，新建SLS同步...
镜像同步加速
自定义同步链路：使用自定义的云企业网，为不同地域搭建私网通信通道，实现跨地域网络互通。如果跨境同步加速功能不能满足您对同步实例时延的要求，您可以使用自定义同步链路来进一步加快镜像同步速度。说明 公有云Region不支持同步至非...
如何迁移到DBFS？
一般存在以下几种常用的方式：主备同步：搭建主备库，通过binary log同步数据到自建于DBFS上的数据库。DTS：使用阿里云产品DTS，将数据迁移到自建于DBFS上的数据库。备份恢复：通过备份的方式，将数据库恢复到DBFS上，拉起数据库，同步最新...
产品优势
学习成本低 非技术人员1~2小时即可掌握完整的数据开发、治理流程，告别传统命令行，节省巨大的学习成本。让您可以在同一DAG图中，构建异构计算引擎形成混编任务流（数据同步+SQL+MR+MaxCompute Spark+实时计算+ML），无需分别维护各技术栈...
功能特性
EIAM 云身份服务 功能集 功能 功能描述 参考文档 钉钉入方向 非敏感数据同步 同步除了手机号、邮箱等敏感字段之外的全部通讯录数据，可扫码配置 钉钉入方向同步 敏感数据同步 同步全部通讯录数据，需创建钉钉企业内部应用 钉钉入方向同步 ...
RDS MySQL同步至MaxCompute
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 RDS MySQL 的数据同步至MaxCompute，帮助您快速搭建数据实时分析系统。前提条件 已开通MaxCompute并创建MaxCompute项目。更多信息，请参见 开通MaxCompute和DataWorks ...
使用MongoShake实现MongoDB实例间的单向同步
通过阿里云自研的MongoShake开源工具，您可以实现MongoDB数据库间的数据同步，该功能可用于数据分析、灾备和多活等业务场景。本文以云数据库MongoDB实例间的数据实时同步为例介绍配置流程。MongoShake介绍 MongoShake是阿里云以Golang语言...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
若使用列映射时为非全表同步或者源与目标表结构不一致，则目标端比源端缺少的列的数据将会丢失。特殊情况 由于源库 Db2 for LUW 为自建数据库，您还需要注意如下事项：在同步时，如果源库进行主备切换，将会导致同步任务失败。由于DTS的...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
若使用列映射时为非全表同步或者源与目标表结构不一致，则目标端比源端缺少的列的数据将会丢失。特殊情况 由于源库 Db2 for LUW 为自建数据库，您还需要注意如下事项：在同步时，如果源库进行主备切换，将会导致同步任务失败。由于DTS的...
从RDS同步至MaxCompute
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 的数据同步至MaxCompute，帮助您快速搭建数据实时分析系统。前提条件 您已完成以下操作：开通MaxCompute 创建项目 注意事项 DTS在执行全量...
同步时源库为PolarDB MySQL版的注意事项及限制
X 1.0 PolarDB MySQL版同步至云原生数据仓库 AnalyticDB MySQL 版 2.0 PolarDB MySQL版同步至云原生数据仓库 AnalyticDB MySQL 版 3.0 PolarDB MySQL版同步至阿里云流式数据服务DataHub PolarDB MySQL版同步至Elasticsearch PolarDB ...
从RDS同步至MaxCompute
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 的数据同步至MaxCompute，帮助您快速搭建数据实时分析系统。前提条件 您已完成以下操作：开通MaxCompute 创建项目 注意事项 DTS在执行全量...
CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
添加外部节点
阿里云区块链服务支持用户使用非阿里云区块链服务的Quorum节点来组成一个Quorum网络。添加外部节点 您可以在其他区块链服务平台或参见 搭建外部测试节点 搭建外部Quorum节点，通过以下步骤将其加入已有的Quorum网络。在 我的以太坊 中找到...
同步 OceanBase 数据库的数据至 Kafka
背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台，数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步，扩展消息处理能力，广泛应用于实时数据仓库搭建、数据查询和报表分流等业务场景。前提条件 数据...
创建异地灾备实例
主实例和灾备实例均搭建主备高可用架构，当主实例所在区域发生突发性自然灾害等状况，主实例（Master）和备实例（Slave）均无法连接时，可将异地灾备实例切换为主实例，在应用端修改数据库连接地址后，即可快速恢复应用的业务访问。...
DataWorks On Hologres使用说明
开始使用：数据集成 DataWorks数据集成提供Hologres数据读取与写入的能力，并提供离线同步、实时同步、全增量同步任务等多种数据同步场景。开始使用：数据建模与开发 DataWorks提供数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据...
常见问题
通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 说明 数据同步基于内网传输，可以保证更低的网络延时。功能特性差异 支持库表列三级对象名映射。支持过滤待迁移的数据。支持选择迁移的...
数据库实时入仓快速入门
步骤五：观察增量同步结果（可选）步骤六：作业资源配置 本文使用Flink提供的 CREATE TABLE AS（CTAS）语句 和 CREATE DATABASE AS（CDAS）语句 来完成整库同步、分库分表合并同步，一键完成数据的全量和增量同步，以及实时的表结构变更...
什么是表格存储
当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为多元索引中的字段并使用多元索引查询与分析数据。表格存储 SQL查询 宽表模型 时序模型 使用SQL...
新功能发布记录
企业版实例支持非阻塞GC（Garbage Collection）清理，在清理过程中，不影响镜像的上传及下载行为。支持多架构制品、加速镜像的清理，清理速率提升5倍。容器镜像服务企业版实例 全地域 清理镜像版本 2022年01月 功能名称 功能描述 功能范围 ...
RDS数据源配置
同步方式选择 自动同步，OpenSearch将尽力保障同步服务的稳定性但不保障同步的延迟，如果对同步延迟比较敏感的业务建议同步方式采用 DTS数据订阅实例（DTS实时同步）。相关限制 只支持RDS的binlog为 full 模式。只支持RDS中的MySQL常规实例...
RDS数据源配置
若配置了RDS/PolarDB数据源，并且同步方式选择 自动同步，OpenSearch将尽力保障同步服务的稳定性但不保障同步的延迟，如果对同步延迟比较敏感的业务建议同步方式采用 DTS数据订阅实例（DTS实时同步）；相关限制 只支持RDS的binlog为 full ...
同步时源库为PolarDB-X 2.0的注意事项及限制
如果同步的源实例为 PolarDB分布式版，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为PolarDB-X的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
RDS实例数据复制方式非异步同步
规则详情 参数 说明 规则名称 RDS实例数据复制方式非异步同步 规则标识 rds-instance-sync-mode-check 标签 RDS，Instance 自动修正 不支持 规则触发机制 周期执行 触发频率 24小时 规则支持的资源类型 RDS实例 规则入参 无 修正指导 设置...
- 产品推荐
- 这些文档可能帮助您