本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 PolarDB MySQL版 集群的数据同步至 Elasticsearch 实例。前提条件 已创建存储空间大于源 PolarDB MySQL版 的目标 Elasticsearch 实例。具体操作,请参见 创建阿里云...
数据传输服务DTS(Data Transmission Service)支持将自建Oracle同步至 云原生数据仓库AnalyticDB PostgreSQL版,帮助您构建实时数仓。前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已开启...
双向同步实例包含正向和反向同步任务,在配置或重置双向同步实例时,若其中一个任务的目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量和增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
双向同步实例包含正向和反向同步任务,在配置或重置双向同步实例时,若其中一个任务的目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量和增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
数据传输服务DTS(Data Transmission Service)支持将 RDS MySQL 实例的全量或增量数据同步至函数计算FC的指定函数。您可以编写函数代码,结合同步至函数中的数据,对数据进行二次加工。前提条件 已创建源 RDS MySQL 实例。创建方式,请...
下线数据集成实时同步任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
如果源库通过专线的方式接入,那么需要将其中任意1个VIP配置到连接信息中,实现Oracle RAC通过专线接入同步任务。如自建Oracle为RAC架构,不支持配置ScanIP,仅支持将其中任意1个VIP配置到连接信息中,该方式配置后不支持RAC的节点切换。需...
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 说明 不支持同步仅更新...
本文介绍如何使用数据传输服务DTS(Data Transmission Service)实现 PolarDB PostgreSQL版(兼容Oracle)集群间的单向同步。前提条件 已创建存储空间大于源 PolarDB PostgreSQL版(兼容Oracle)集群已占用存储空间的目标 PolarDB ...
本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 PolarDB-X 2.0 同步至MaxCompute。前提条件 已创建源 PolarDB-X 2.0 实例,且兼容MySQL 5.7版本。更多信息,请参见 创建实例 和 创建数据库。已开通MaxCompute。更多...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 所需权限 ...
双向同步实例包含正向和反向同步任务,在配置或重置双向同步实例时,若其中一个任务的目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量和增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
双向同步实例包含正向和反向同步任务,在配置或重置双向同步实例时,若其中一个任务的目标对象是另一个任务待同步的对象:仅允许其中一个任务同步全量和增量数据,另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不...
数据传输服务DTS(Data Transmission Service)支持在源端MongoDB的数据中分片键字段缺失的情况下,将数据同步至分片集群架构的MongoDB中,并指定分片键的默认值。本文以 云数据库MongoDB版(副本集架构)为源且 云数据库MongoDB版(分片...
数据传输服务DTS(Data Transmission Service)支持在源端MongoDB的数据中分片键字段缺失的情况下,将数据同步至分片集群架构的MongoDB中,并指定分片键的默认值。本文以 云数据库MongoDB版(副本集架构)为源且 云数据库MongoDB版(分片...
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 操作步骤 登录 新版DTS...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不支持分区、表...
数据传输服务DTS(Data Transmission Service)支持将 RDS SQL Server 实例的数据同步至 云原生数据仓库AnalyticDB PostgreSQL版,帮助您轻松实现数据的流转。通过 AnalyticDB PostgreSQL版 提供的数据在线分析服务和离线数据处理功能,您...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不支持分区、表...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 级联单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。任务步骤说明 同步类型 说明 库表结构同步 将源 云数据库MongoDB版 中同步对象的结构同步到目标 ...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 级联单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。任务步骤说明 同步类型 说明 库表结构同步 将源 云数据库MongoDB版 中同步对象的结构同步到目标 ...
数据传输服务DTS(Data Transmission Service)支持将 云数据库MongoDB版(副本集架构)实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码,结合同步至函数中的数据,对数据进行二次加工。前提条件 已创建源 云数据库MongoDB...
详细配置信息,请参见 通过向导模式配置离线同步任务。运行任务。(可选)配置任务调度属性。在页面右侧,单击 调度配置,按照需求配置相应的调度参数。各配置的详细说明请参见 调度配置。在节点区域的右上角,单击保存图标,保存任务。在...
当您基于Hadoop进行交互式大数据分析查询,遇到查询延迟的问题时,可以将数据同步至阿里云Elasticsearch中再进行查询分析。ES对于多种查询类型,特别是即席查询(Ad Hoc),基本可以达到秒级响应。本文介绍通过DataWorks的数据集成服务,...
详细配置信息,请参见 通过向导模式配置离线同步任务。运行任务。(可选)配置任务调度属性。在页面右侧,单击 调度配置,按照需求配置相应的调度参数。各配置的详细说明请参见 调度配置。在节点区域的右上角,单击保存图标,保存任务。在...
数据传输服务DTS(Data Transmission Service)支持将 云数据库MongoDB版(分片集群架构)实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码,结合同步至函数中的数据,对数据进行二次加工。前提条件 已创建源 云数据库...
详细配置信息,请参见 通过向导模式配置离线同步任务。运行任务。(可选)配置任务调度属性。在页面右侧,单击 调度配置,按照需求配置相应的调度参数。各配置的详细说明请参见 调度配置。在节点区域的右上角,单击保存图标,保存任务。在...
如果您需要对MaxCompute(ODPS)中的海量数据进行信息检索、多维查询、统计分析等操作,可借助阿里云Elasticsearch实现。本文通过DataWorks的数据集成服务,实现最快分钟级,将海量MaxCompute数据离线同步到阿里云ES中。背景信息 DataWorks...
数据传输服务DTS(Data Transmission Service)支持将MongoDB(分片集群架构)的数据同步至MongoDB(副本集架构或分片集群架构)。本文以 云数据库MongoDB版 实例间的数据同步为例,为您介绍操作步骤。前提条件 已创建目标 云数据库MongoDB...
数据传输服务DTS(Data Transmission Service)支持将MongoDB(分片集群架构)的数据同步至MongoDB(副本集架构或分片集群架构)。本文以 云数据库MongoDB版 实例间的数据同步为例,为您介绍操作步骤。前提条件 已创建目标 云数据库MongoDB...
详细配置信息,请参见 通过向导模式配置离线同步任务。运行任务。(可选)配置任务调度属性。在页面右侧,单击 调度配置,按照需求配置相应的调度参数。各配置的详细说明请参见 调度配置。在节点区域的右上角,单击保存图标,保存任务。在...
如同步类型仅为增量同步,DTS要求数据库的本地Binlog日志保存24小时以上,如同步类型包含全量同步和增量同步,DTS要求数据库的本地Binlog日志至少保留7天以上(您可在全量同步完成后将Binlog保存时间设置为24小时以上),否则DTS可能因无法...
请求参数 参数 类型 是否必传 描述 UserInfo String(Struct)是 用户信息是JSON字符串,结构详情见下 Count Integer 是 同步数量,不可超过有效并发数所支持的最大用户数 UserInfo(用户信息)结构 参数 类型 是否必传 描述 userId String ...
任务状态 状态说明 可进行的操作 创建中 同步任务正在进行同步初始化 查看同步配置 运行中 同步任务正常同步中 查看同步配置 暂停同步 取消同步 已暂停 同步任务被暂停,处于暂停状态 查看同步配置 修改同步对象 重新启动任务 取消任务 已...
本文介绍如何以 Java SDK 的方式在服务端接入数据同步服务。引入 Jar 包 完成 Maven 配置后,在主控 pom.xml 文件中引入如下依赖:<dependency><groupId>...
是 无 column 所配置的表中需要同步的列名集合。以英文逗号(,)进行分隔。说明 建议您不要使用默认列情况。是 无 preSql 执行数据同步任务之前率先执行的SQL语句,目前只允许执行一条SQL语句,例如清除旧数据。说明 当有多条SQL语句时,不...
本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...
本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...
实时同步任务是由实时数据同步时发起的任务,运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务,具体操作,请参见 上线实时任务。操作步骤 登录 数据资源平台控制台。在页面左上角,...