CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
将AD域数据同步到钉钉
本文介绍如何实现 AD 域的身份数据自动同步到钉钉。IDaaS 可以全面打通 AD 到钉钉的身份数据同步链路：当 AD 的用户/组织数据有变动时，自动变更钉钉通讯录数据。通过该能力，企业可以将 AD 作为传统的身份管控来源，并自动地向钉钉以及...
支持的数据库
全量数据同步 增量数据同步 单向同步 RDS MySQL同步至自建Oracle PolarDB-X 1.0 全量数据同步 增量数据同步 单向同步 从RDS MySQL同步至PolarDB-X PolarDB-X 2.0 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至PolarDB-...
同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 RDS PostgreSQL 实例创建专用于数据同步项目的高权限账号。详情请...
使用canal同步
对于中小规模的数据库或者个人开发者，您可以使用canal将MySQL数据同步到表格存储。canal部署简单，易于运维，适用于中小规模MySQL数据同步。前提条件 已开启MySQL binlog功能，并且配置binlog-format为ROW模式。已创建目标Tablestore表。...
数据库实时入仓快速入门
步骤五：观察增量同步结果（可选）步骤六：作业资源配置 本文使用Flink提供的 CREATE TABLE AS（CTAS）语句 和 CREATE DATABASE AS（CDAS）语句 来完成整库同步、分库分表合并同步，一键完成数据的全量和增量同步，以及实时的表结构变更...
配置匹配规则
本文为您介绍迁移/同步对象匹配规则的背景信息、使用限制、配置方式，以及场景示例和常见问题。背景信息 您在创建数据迁移或数据同步项目时，需要指定具体的迁移或同步的对象。数据传输提供指定对象、导入对象和匹配规则三种方式供您选择。...
管理共享
加入同步组 开启该共享的极速同步功能，将其加入同步组，对该共享的Bucket中数据进行的任何改动都会自动同步至共享的本地客户端。开启该选项后，该共享的反向同步选项将自动关闭。说明 要选择该选项，您必须提前创建一个同步组，且同步组的...
方案概述
逻辑迁移（DTS数据同步）方式：通过数据传输服务DTS，创建数据同步任务，将源RDS MySQL实例的库表结构和全量数据同步至创建的 PolarDB MySQL版 集群中，然后保持增量数据同步。物理迁移（物理复制）和逻辑迁移（DTS数据同步）方式区别如下...
配置同步任务
配置同步任务是将数据源的数据同步到目标表的过程。本文为您介绍如何配置同步任务。配置流程说明 同步任务的配置流程如下图。来源表和目标表均支持多种数据源。数据库类型 数据源 关系型数据库 MySQL、Oracle、Microsoft SQL Server、...
在云控制台上使用文件网关
加入同步组 开启该共享的极速同步功能，将其加入同步组，对该共享的Bucket中数据进行的任何改动都会自动同步至共享的本地客户端。开启该选项后，该共享的反向同步选项将自动关闭。说明 要选择该选项，您必须提前创建一个同步组，且同步组的...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
重要 目标端不支持 OceanBase 数据库 Oracle 租户的 实例类型 为 VPC 内自建数据库。单击 下一步。在 选择迁移类型 页面，选择当前数据迁移项目的迁移类型。迁移类型 包括 结构迁移、全量迁移、增量同步、全量校验 和 反向增量。迁移类型 ...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
专线、VPN网关或智能网关接入的自建MySQL同步至RDS ...
数据传输服务DTS（Data Transmission Service）支持将使用专线、VPN网关或智能网关接入的自建MySQL数据库同步至 RDS MySQL 实例。前提条件 已将自建MySQL数据库接入到阿里云。更多信息，请参见 本地IDC接入至阿里云。说明 支持的版本，请...
同步时源库为PostgreSQL的注意事项及限制
如果同步的源数据库类型为PostgreSQL，如RDS PostgreSQL、自建PostgreSQL，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为PostgreSQL的同步方案概览 根据同步方案，查看同步任务的注意...
数据同步简介
基本原理 类似于 MySQL 的 binlog 机制，数据同步服务器和客户端 SDK 之间传递的基本数据单元为 oplog，当业务需要同步一个变更数据到指定的用户或设备时，业务调用数据同步接口，数据同步服务端会将业务需要同步的数据变更包装为一个 ...
创建与管理数据模型
Sequence（序列）：自增长序列，默认为Long类型，必填且唯一，可设置为主键，需要设置初始值。您可以重复此步骤，添加多个字段。将鼠标悬浮在字段卡片，单击删除图标，可以删除选中字段。如果您选择 批量预留，请参考以下步骤配置。在 批量...
DB2数据源
对于新增流水型数据，DB2 Reader在where条件后跟上一阶段最大自增ID即可。对于业务上无字段区分新增、修改数据的情况，DB2 Reader无法进行增量数据同步，只能同步全量数据。SQL安全性 DB2 Reader提供 querySql 语句交给您自己实现SELECT...
SQL Server数据源
SQL Server数据源为您提供读取和写入SQL Server双向通道的功能，本文为您介绍DataWorks的SQL Server数据同步的能力支持情况。支持的版本 SQL Server Reader使用驱动版本是com.microsoft.sqlserver sqljdbc4 4.0，驱动能力具体请参见 官网...
Oracle数据源
Oracle数据源为您提供读取和写入Oracle双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle ...
基本概念
为便于您更好的理解视频点播产品，您可以在使用前了解视频格式、视频编码、视频转码等基本概念。文件格式 操作系统中的文件名都有后缀，即扩展名，例如1.doc，2.jpg，3.avi等。设置扩展名的目的是让系统中的应用程序来识别并关联这些文件，...
基本概念
在对同一个视频进行多码率转码时，如果指定IDR帧对齐（IDR Frame Alignment），则意味着所有输出视频的IDR帧在时间点、帧内容方面都保持精确同步，此时播放器便可实现多码率视频平滑切换，从而不会出现较为明显的切换卡顿。编码级别 编码...
内容检测API
内容安全图片审核同步接口一次调用最多支持100个检测元素，即每次提交100条内容进行检测。但是支持100个元素的前提是需要将并发调整到100以上，内容安全API默认并发是：图片审核50张，文本审核100条，视频 和语音 审核20路。更多信息，请...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
Oracle 源实例必须已经安装并可正常使用 LogMiner 工具。您可以通过 LogMiner 工具获取 Oracle 归档日志文件中的具体内容。确认 Oracle 实例已开启数据库级别或者表级别的补偿日志。开启数据库级别的 PK 和 UK 补偿日志，当无需同步的表...
云监控
在关联云监控后，云效会自动同步环境下ECS到相应的云监控分组，并自动安装云监控agent。环境关联或删除机器，都会同步维护对应的云监控分组。在使用之前，请确保先完成 配置授权云效。使用限制 只支持阿里云云服务器ECS 只支持VPC网络 开启...
Redis数据同步方案概览
场景 工具 配置案例 从自建库同步至云数据库Redis DTS 从自建Redis集群同步至Redis集群实例 从ECS上的自建Redis同步至Redis实例 从ECS上的Codis集群同步至Redis实例 从ECS上的Twemproxy Redis集群同步至Redis实例 云数据库Redis间同步 DTS ...
字典编码（公测）
使用自动压缩编码优化 Beam存储引擎支持自适应的压缩算法。如果您不确定是否需要使用字典编码压缩，可以在表级别指定 compresstype='auto'，存储引擎会自动选择合适的编码压缩算法。CREATE TABLE NATION(n_nationkey integer NOT NULL,n_...
通过 SCIM 同步账户至云SSO
步骤一：在云SSO控制台开启 SCIM 同步 1.使用阿里云账号登录 云SSO 控制台。2.在左侧导航栏，单击 设置。3.在设置页签，单击 SICM用户同步配置 下方按钮，开启 SCIM 同步。4.点击 生成密钥 该密钥只显示一次，请复制后妥善保存，用于填写 ...
【邀测】同步备份
本文介绍同步备份功能，同步备份是一项方便、高效的云存储功能，支持 云与本地数据双向实时同步，实现多终端设备数据保持最终一致。功能特点 云-端数据双向同步：在本地存储和编辑的最新文件/文件夹实时同步至云端，云端已上传及更新的文件...
通过 SCIM 同步账户至 RAM
步骤二：在 IDaaS 配置 SCIM 同步 在IDaaS实例控制台 应用 界面，点击 添加应用 进入 应用市场，选择 阿里云用户SSO 应用模板进行添加。切换至 账户同步 界面，打开 IDaaS 同步到应用 按钮。选择 同步范围 后点击 保存。填写 client_id 和 ...
账户同步-SCIM
IDaaS 支持通过 SCIM 协议（作为 SCIM Client 客户端），由 IDaaS 将账户同步给应用（应用需支持作为 SCIM Server 服务端）。SCIM（System for Cross-domain Identity Management，跨域身份管理系统，用于规范不同系统间的身份数据共享原则...
从ECS上的自建MySQL同步至自建Kafka集群
支持的同步架构 1对1单向同步 1对多单向同步 多对1单向同步 级联单向同步 准备工作 在正式配置数据同步作业之前，您需要 为自建MySQL创建账号并设置binlog。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例为 ...
从Consul迁移到MSE Nacos
使用MSE Sync工具，您可以轻松地将Consul中的服务数据同步到Nacos，只需进行简单的配置即可实现全部服务的全量同步。通过依赖替换和重新打包，即可从Consul迁移到Nacos。本文将介绍如何实现从Consul到Nacos的迁移。前提条件 创建Nacos引擎...
从ECS上的自建MySQL同步至自建Kafka集群
支持的同步架构 1对1单向同步 1对多单向同步 多对1单向同步 级联单向同步 准备工作 在正式配置数据同步作业之前，您需要 为自建MySQL创建账号并设置binlog。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例为 ...
从PolarDB MySQL版同步到Kafka
通过数据传输服务DTS（Data Transmission Service），您可以将 PolarDB MySQL版 同步至自建Kafka集群，扩展消息处理能力。前提条件 Kafka集群的版本为0.10.1.0~2.7.0版本。PolarDB MySQL版 已开启Binlog，详情请参见 如何开启Binlog。注意...
从PolarDB MySQL版同步到Kafka
通过数据传输服务DTS（Data Transmission Service），您可以将 PolarDB MySQL版 同步至自建Kafka集群，扩展消息处理能力。前提条件 Kafka集群的版本为0.10.1.0~2.7.0版本。PolarDB MySQL版 已开启Binlog，详情请参见 如何开启Binlog。注意...
从通过专线、VPN网关或智能接入...同步至自建Kafka集群
支持的同步架构 1对1单向同步 1对多单向同步 多对1单向同步 级联单向同步 准备工作 在正式配置数据同步作业之前，您需要 为自建MySQL创建账号并设置binlog。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例为 ...
从通过专线、VPN网关或智能接入...同步至自建Kafka集群
支持的同步架构 1对1单向同步 1对多单向同步 多对1单向同步 级联单向同步 准备工作 在正式配置数据同步作业之前，您需要 为自建MySQL创建账号并设置binlog。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例为 ...
从RDS同步至自建Kafka集群
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 的数据库同步至自建Kafka集群，扩展消息处理能力。前提条件 Kafka集群的版本为0.10.1.0~2.7.0版本。已创建 RDS MySQL实例 或 Serverless...
主备方案介绍
同城容灾方案 主备节点支持云数据库HBase间、云数据库HBase和自建HBase、自建HBase和自建HBase。主备节点分别部署在同一地域下两个不同的可用区，当任一可用区因电力、网络等不可抗因素失去通信时，高可用HA系统将执行故障切换，确保整个...
- 产品推荐
- 这些文档可能帮助您