最佳实践概览

通过DataWorks将MaxCompute数据同步至Elasticsearch 通过阿里云Logstash将MaxCompute数据同步至Elasticsearch 通过实时计算处理数据并同步到Elasticsearch 通过DataWorks将Hadoop数据同步至Elasticsearch 存储产品迁移 从Solr集群迁移文档...

E-MapReduce数据迁移方案

全量数据同步 hadoop distcp-pbugpcax-m 1000-bandwidth 30 hdfs:/oldclusterip:8020/user/hive/warehouse/user/hive/warehouse 增量数据同步 hadoop distcp-pbugpcax-m 1000-bandwidth 30-update-delete hdfs:/oldclusterip:8020/user/...

MongoDB 4.0

同步数据 功能 通用型云盘版 功能影响及建议 使用DTS实现云数据库MongoDB实例间同步 使用MongoShake工具实现MongoDB实例间同步(副本集间单向同步)单节点实例不支持使用DTS或MongoShake工具实现数据同步。副本集实例 计费管理 功能 通用型...

MongoDB 4.2

使用MongoShake工具实现MongoDB实例间同步(副本集间单向同步)在全量数据同步完成之前,请勿对源库进行DDL操作,否则可能导致数据不一致。不支持同步admin和local数据库。分片集群实例 说明 代表支持,代表不支持。计费管理 功能 通用型...

配置同步任务(旧控制台)

注意事项 本文仅简单介绍数据同步任务的通用配置流程,不同的数据源在配置数据同步任务时略有不同。关于各类数据源的详细配置案例请参见 DTS数据同步方案概览。准备工作 数据同步的源数据库为PolarDB MySQL或自建MySQL时,须开启其binlog...

异构数据源访问

测试数据集内容如下:1,test1,1,100 2,test2,2,90 操作步骤 在 异构数据源访问 页签,单击 新增数据源 的下拉菜单,选择 Hadoop数据源。在 新增Hadoop数据源页面 页面依次配置 网络&安全组、配置文件、初始化。配置 网络&安全组。参数 说明...

配置同步任务(新控制台)

注意事项 本文仅简单介绍数据同步任务的通用配置流程,不同的同步链路在配置数据同步任务时略有不同。指定同步链路的具体配置步骤,请参见 同步方案概览。说明 本文中的配置参数仅供参考,请以实际界面为准。准备工作 当源或目标库为自建...

基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...

创建并执行数据同步任务。在DataWorks的数据开发模块中创建离线同步任务,详情请参见 通过向导模式配置离线同步任务。关键配置如下:网络与资源配置。参数 说明 来源 数据来源 MySQL。数据源名称 已创建的MySQL数据源。资源组 我的资源组 ...

启动和暂停数据同步项目

启动数据同步项目 创建数据同步项目时,如果在预检查完成后仅保存该数据同步项目,未进行启动,则需要在同步项目列表中手动启动数据同步项目。登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据同步。在 同步项目列表 页面,...

数据同步流程

数据传输提供数据同步功能,帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...

重新配置数据同步作业

当您需要停止数据同步或重新配置数据同步时,您可以通过本文的方法来重置数据同步作业。前提条件 数据同步作业不处于 未配置 状态。费用影响 包年包月:无影响。按量付费:数据同步作业将转变为 未配置 状态并停止计费,再次完成数据同步...

同步方案概览

全量数据同步 增量数据同步 单向同步 RDS MySQL同步至自建Oracle PolarDB-X 1.0 全量数据同步 增量数据同步 单向同步 从RDS MySQL同步至PolarDB-X PolarDB-X 2.0 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至PolarDB-...

数据同步操作指导

数据同步功能可以帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。本文介绍数据同步功能的具体使用流程,帮助您快速掌握创建、...

查看数据同步项目的详情

启动数据同步项目后,您可以在数据同步项目的详情页面查看相应项目的基本信息、同步详情和同步对象等信息。进入详情页面 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据同步。单击目标数据同步项目的名称,进入详情页面,...

引用和清空数据同步项目配置

本文为您介绍如何引用和清空已有数据同步项目的配置。引用项目配置 重要 目前处于 未配置 状态的数据同步项目支持 引用配置 操作。登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据同步。在 数据同步 页面,单击未配置的目标...

结束数据同步作业

如果不再需要数据同步,您可以结束数据同步作业,停止将源库的数据变更同步至目标库。前提条件 数据同步作业处于 同步中、已暂停、同步失败、同步初始化中 或 同步初始化失败 状态。注意事项 结束数据同步作业后,数据同步作业将处于 已...

JindoData版本说明

支持Jindo Sync数据同步工具,您可以不依赖Hadoop环境进行数据同步。JindoSDK支持OSS-HDFS TensorFlow Connector。JindoData 4.5.X版本 JindoData 4.5.1版本 版本概要 4.5.1版本是对4.5.0版本的小幅升级,进行了重要的修复和改进。JindoFS...

申请跨境数据同步权限

数据传输服务DTS(Data Transmission Service)默认仅支持非跨境的数据同步任务,若您需要创建跨境(跨国家或地区)的数据同步任务,需要申请开通跨境同步的权限。例如,创建从中国内地到非中国内地地域的同步任务时,需要申请跨境同步的...

上线离线数据同步任务

新增离线数据同步任务后,需对任务进行上线操作,同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务,具体操作,请参见 新增离线数据同步任务、批量新增离线数据...

上线离线数据同步任务

新增离线数据同步任务后,需对任务进行上线操作,同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务,具体操作,请参见 新增离线数据同步任务、批量新增离线数据...

数据同步方案概览

数据同步功能帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。收费策略 DTS数据同步...

下载和导入同步对象配置

数据传输支持下载数据同步项目的同步对象配置信息,并支持通过导入 CSV 文件的方式实现自动配置和确认同步对象的配置信息,以实现保存项目配置信息和批量、快速配置项目。下载对象配置 新建数据同步项目后,您可以下载同步对象的配置信息。...

数据迁移与同步FAQ

本文为您列出数据迁移与数据同步的常见问题和相关解答。什么是数据迁移、数据同步?DTS的数据迁移与数据同步工作原理是什么?DTS的数据迁移与数据同步有什么区别?使用DTS遇到预检查报错,如何解决?什么是数据迁移、数据同步?数据迁移:...

数据引入概述

Dataphin支持通过数据集成和数据同步的方式,将业务数据源的数据引入Dataphin平台。背景信息 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单...

数据引入概述

Dataphin支持通过数据集成和数据同步的方式,将业务数据源的数据引入Dataphin平台。背景信息 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单...

同步 DDL

本文为您介绍创建数据迁移或数据同步项目时,同步 DDL 选项的适用场景、使用限制和操作步骤。适用场景 创建数据迁移或数据同步项目时,您可以设置是否同步 DDL。只有设置同步 DDL 后,CREATE、ALTER、DROP 或 TRUNCATE TABLE 等 DDL 语句才...

购买数据同步项目

本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步项目。背景信息 目前数据同步项目仅支持预付费模式,即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步项目后,再对项目进行具体配置和管理。数据同步项目...

操作流程

数据同步主要内容包括数据源配置、获取物理表、创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 配置数据同步的源端和目标端。数据同步的源端,是数据同步任务的起点。数据同步目标端是同步的终点...

操作流程

数据同步主要内容包括数据源配置、获取物理表、创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 配置数据同步的源端和目标端。数据同步的源端,是数据同步任务的起点。数据同步目标端是同步的终点...

数据同步

数据同步提供批量、实时多源异构数据的便捷同步或接入能力,系统提供完善的数据接入配置、任务运行监控等功能,有效保障数据接入的稳定性和可控性,满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、超图等...

数据同步概述

Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全...

数据同步概述

Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全...

功能简介

数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力,系统提供完善的数据接入配置、任务运行监控等功能,有效保障数据接入的稳定性和可控性,满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、...

功能简介

数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力,系统提供完善的数据接入配置、任务运行监控等功能,有效保障数据接入的稳定性和可控性,满足各类平台、数据源及应用系统间的数据汇聚需求。通过数据同步的自定义同步任务...

查看离线数据同步任务监控

前提条件 已上线离线数据同步任务,具体操作,请参见 上线离线数据同步任务。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。在左侧导航栏,单击 图标...

查看离线数据同步任务监控

前提条件 已上线离线数据同步任务,具体操作,请参见 上线离线数据同步任务。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。在左侧导航栏,单击 图标,将...

数据同步方案概览

云原生关系型数据库PolarDB 提供了多种数据同步方案,可满足不同的业务同步需求,使您可以在不影响业务的情况下平滑的实现引擎间的数据同步。通过使用阿里云 数据传输服务(DTS),您可以实现 PolarDB 的实时同步。数据同步 使用场景 文档...

数据导入与迁移

RDS增量数据同步 通过BDS数据同步服务可以将RDS增量数据实时同步到HBase增强版中,使用说明:开通 LTS服务。在BDS中添加HBase增强版集群关联,具体操作方法参见 添加HBase增强版数据。请参见 RDS全增量同步 完成配置。HBase迁移至HBase增强...

计费常见问题

常见问题 Q:按量付费的计费方式下,手动结束了数据迁移实例或数据同步实例,还会继续收费吗?A:不收费。数据迁移实例仅在增量数据迁移正常运行期间计费(包含增量数据迁移暂停期间);数据同步实例仅在完成配置且成功启动后开始计费...

DML 过滤

本文为您介绍创建数据迁移或数据同步项目时,DML 过滤的适用场景、使用限制和操作步骤。适用场景 创建数据迁移或数据同步项目时,您可以对需要同步的 DML SQL 语句设置同步策略,只有符合设置条件的 SQL 语句才会被同步至目标端。该功能常...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 RDS 数据库备份 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用