应用场景

场景一:业务实时搜索 当业务需要对海量数据进行多维度、实时的搜索时,关系型数据库显然力不从心。一个非常典型的例子就是对产品或者商品进行多维度搜索。此时,业务需要借助云搜 Zsearch(对标 Elaticsearch 的蚂蚁金服金融科技发布的...

全球数据库常见问题

本文档介绍了全球数据库(GDN)的常见问题。GDN主从数据路由的逻辑是什么?GDN的跨地域读写分离功能需要依赖 PolarDB 集群的集群连接地址实现。集群的读请求通常情况下会直接发往本地,而写请求则被转发至集群。详情请参见 技术架构。...

数据同步方案概览

RDS MySQL同步至PolarDB MySQL RDS同步至通过专线、VPN网关或智能接入网关接入的自建MySQL MySQL数据同步至其他数据库 RDS同步到云原生数据仓库AnalyticDB MySQL RDS MySQL同步至云原生数据仓库AnalyticDB PostgreSQL RDS MySQL...

2020年

自建PostgreSQL(10.1~13版本)增量迁移至RDS PostgreSQL PostgreSQL同步至分析型数据库PostgreSQL时,支持对sequence(序列生成器)的结构初始化和全量数据初始化。RDS PostgreSQL同步至云原生数据仓库AnalyticDB PostgreSQL 自建...

如何建立RDS PostgreSQL的备

操作步骤 您可以先创建一个新的RDS PostgreSQL数据库作为备库,然后在备库中同步主库的PostgreSQL数据,最后使用逻辑订阅功能,在备库中实时同步主库的数据,从而实现备库的功能。具体操作步骤请参考以下内容:登录 RDS控制台,参见 恢复...

概览

支持 自建数据库同步数据 文档 简介 是否支持Serverless版本 ECS上的自建MySQL同步至AnalyticDB PostgreSQL版 数据传输服务DTS(Data Transmission Service)支持将ECS上的自建MySQL数据同步至 AnalyticDB PostgreSQL版,帮助您轻松...

数据上云场景

数据库数据同步 数据库的数据同步到MaxCompute需要根据数据库的类型和同步策略来选择相应的工具。离线批量的数据库数据同步:可以选择DataWorks,支持的数据库种类丰富,包括MySQL、SQL Server、PostgreSQL等,详情请参见 通过向导模式配置...

数据迁移和同步方案概览

升级数据库大版本 数据迁移 变更实例配置 按时间点将备份数据恢复至新建实例 恢复云数据库MongoDB单个或多个数据库 使用限制 单节点实例不支持增量数据迁移与同步数据迁移方案 您可以通过以下方式迁移MongoDB数据库的数据。重要 单节点...

应用场景

云上云下数据库同步 通过数据库传输服务DTS的数据同步功能,可以使本地IDC或其他云厂商的数据库与阿里云数据库内容进行同步,详情请参见 数据同步的工作原理,架构图如下所示。本地IDC/跨云数据库备份上云 数据库备份 DBS 是阿里云提供的低...

ECS上的自建MySQL同步至PolarDB MySQL版

说明 如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等)或ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中,您无需手动添加,请参见 DTS服务器的IP...

ECS上的自建MySQL同步至PolarDB MySQL版

注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

原理架构

系统架构 数据同步服务的逻辑架构图:全量同步:负责将表数据源端数据库同步到目的端数据库,支持异构数据库同步。增量同步:负责将源端的增量数据同步到目的端,主要包含 Store 和 JDBCWriter 两个组件。存储:采集源端 DB 的变更到...

通过专线、VPN网关或智能接入网关接入的自建MySQL...

说明 如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等)或ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中,您无需手动添加,请参见 DTS服务器的IP...

应用场景

云上云下数据库同步 通过数据库传输服务DTS的数据同步功能,可以使本地IDC或其他云厂商的数据库与阿里云数据库内容进行同步,详情请参见 数据同步的工作原理,架构图如下所示。本地IDC/跨云数据库备份上云 数据库备份 DBS 是阿里云提供的低...

通过专线、VPN网关或智能接入网关接入的自建MySQL...

注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

MySQL实例间的双向同步

同步数据库 同步目的数据库 RDS MySQL实例 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过数据库网关接入的自建数据库 通过云企业网CEN接入的自建数据库 RDS MySQL实例 ECS上的自建数据库 通过专线、VPN网关或智能...

PolarDB MySQL版同步到Kafka

数据库账号 填入 PolarDB MySQL版 集群的数据库账号,需要具备待同步数据库的读权限。数据库密码 填入该数据库账号的密码。目标实例信息 实例类型 根据Kafka集群的部署位置选择,本文以 ECS上的自建数据库 为例介绍配置流程。说明 当选择为...

同步方案概览

源为自建SQL Server或RDS SQL Server的同步方案 源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为TiDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i(AS/400)...

API概览

DescribeSynDbTables 查看同步数据库与表 查看同步数据库与表。DeleteSyndb 删除同步任务 删除同步db。DescribeTransferHistory 查看迁移记录 查看迁移记录。TransferVersion 迁移版本 迁移版本。CreateServiceLinkedRole 创建服务关联角色...

PolarDB MySQL版同步到Kafka

数据库账号 填入 PolarDB MySQL版 集群的数据库账号,需要具备待同步数据库的读权限。数据库密码 填入该数据库账号的密码。目标实例信息 实例类型 根据Kafka集群的部署位置选择,本文以 ECS上的自建数据库 为例介绍配置流程。说明 当选择为...

RDS同步至自建Kafka集群

通过数据传输服务DTS(Data Transmission Service),您可以将 RDS MySQL 或RDS MySQL Serverless 的数据库同步至自建Kafka集群,扩展消息处理能力。前提条件 Kafka集群的版本为0.10.1.0~2.7.0版本。已创建 RDS MySQL实例 或 Serverless...

实时同步数据库数据至Hologres

本文为您介绍如何通过DataWorks数据集成实时同步数据库中的数据至Hologres。前提条件 开通DataWorks,详情请参见 入门概述。开通Hologres实例并绑定至DataWorks工作空间,详情请参见 DataWorks快速入门。已开通云数据库。说明 跨地域是否...

一键创建OSS数据仓库

本文介绍如何通过向导将RDS、PolarDB for MySQL、MongoDB数据库或者ECS自建数据库数据同步到OSS中,即创建OSS数据仓库(创建Schema)。操作步骤 登录 Data Lake Analytics管理控制台。在页面左上角,选择DLA所在地域。在左侧导航栏单击 ...

配置跨Spark SQL节点

例如,qntext数据库的ex_customer表读取数据,并写入到qn_rds数据库的test_table表中。qntext数据库的别名设置为qn,qn_rds数据库的别名设置为rds。输入的SQL语句如下:INSERT INTO rds.test_table SELECT*FROM qn.ex_customer;说明 SQL...

什么是数据库网关

数据库网关DG(Database Gateway)是一种支持私网数据库远程访问的数据库连接服务。通过数据库网关,您可以安全且低成本地将第三方云或本地的数据库接入至阿里云。同时,数据库网关可以与其他阿里云产品(例如数据传输服务DTS,数据库备份...

数据集成侧同步任务能力说明

说明 支持的变量解释:DATASOURCE_NAME_SRC:源端数据源名称 DB_NAME_SRC:源端数据库名称 TABLE_NAME_SRC:源表名称 DATASOURCE_NAME_DEST:目标端数据源名称 DB_NAME_DEST:目标端数据库名称 TABLE_NAME_DEST:目标表名称 DB_NAME_SRC_...

仓库同步

针对其他平台导入至 Codeup 的代码,支持快速触发三方源代码仓库数据同步,在代码迁移阶段可以帮助企业循序渐进地将业务旧系统迁移至云效Codeup。当企业切换代码平台的过程中,为了降低对日常业务的干扰,可以先迁移一部分敏感度低...

创建备实例

目前 OceanBase 数据库 V3.x 版本和 V4.2 及以上版本支持创建备实例。购买数量 默认为 1。购买时长 可选,建议备实例的到期时间与实例临近。单击 立即购买。勾选 服务协议,并单击 去支付。支付成功后,您可以在 实例列表 中查看刚创建的...

用户权限说明

OceanBase 数据库 MySQL 租户作为源端的权限说明 OceanBase 数据库 MySQL 租户作为源端时,迁移/同步用户需要如下权限:目标端为 Kafka、DataHub 和 RocketMQ 等消息队列类型时,需要对源端待同步数据库具备 SELECT 权限。目标端为 MySQL ...

支持的数据库

增量数据同步 单向同步 RDS MySQL同步至函数计算FC 云数据库SelectDB版 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至云数据库SelectDB版 源为PolarDB MySQL版的同步方案 重要 PolarDB-X 1.0中的数据库须基于RDS MySQL...

数据库代理常见问题

数据库代理中的连接池与应用程序中的连接池有什么区别,应该如何结合使用?RDS MySQL数据库代理的连接池功能是指代理的连接池功能,不影响客户端的连接池功能。如果您的客户端已经支持连接池,则可以不使用Proxy的连接池功能。RDS MySQL...

ETL工具支持概览

支持的ETL工具见下,可以同时参见更详细的同步方案列表 数据迁移及同步方案综述:数据传输服务(DTS):阿里云提供的实时数据同步服务,可以将其他数据源(RDS MySQL,ECS自建MySQL,PolarDB等)实时同步数据到 AnalyticDB PostgreSQL版,...

配置匹配规则

数据同步项目中,仅 OceanBase 数据库 MySQL 租户至 AnalyticDB MySQL、RDS PostgreSQL 实例至 OceanBase 数据库 Oracle 租户 和 OceanBase 数据库 MySQL 租户之间的数据同步 支持通过配置通配规则的方式选择同步对象。在 选择迁移对象 ...

DescribeSynDbTables-查看同步数据库与表

查看同步数据库与表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...

一键升级RDS MySQL X-Engine至PolarDB MySQL版

如为增量同步任务,DTS要求源数据库的本地Binlog日志保存24小时以上,如为全量同步和增量同步任务,DTS要求源数据库的本地Binlog日志至少保留7天以上(您可在全量同步完成后将Binlog保存时间设置为24小时以上),否则DTS可能因无法获取...

通过整迁移配置集成任务

离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务,MaxCompute等数据源。本文为您介绍如何新建并配置整库迁移任务。功能介绍 离线整库迁移是一个提升用户效率、降低用户使用成本的一种快捷工具。相对于离线...

OCS与数据库结合使用示例

MySQL中查询数据.Key=non-beijing,Value=7 OCS中读取数据.Key=non-beijing,Value=7 OCS中读取数据.Key=non-beijing,Value=7 OCS中读取数据.Key=non-beijing,Value=7 …… …… 结果可以看出,程序第1次是MySQL数据库当中查询...

独享数据集成资源组

性能指标 规格 离线同步最大并发线程数 4c8g 8 8c16g 16 12c24g 24 16c32g 32 24c48g 48 规格 单任务建议需要的资源规格 MySQL来源实时同步数据库数1 4c8g MySQL来源实时同步数据库数[2-5]8c16g MySQL来源实时同步数据库数6以上 12c24g ...

Schema探索

示例二:运行不带有ON子句的SHOW RETENTION POLICIES查询 使用 USE<database_name>指定数据库>USE NOAA_water_database Using database NOAA_water_database>SHOW RETENTION POLICIES name duration shardGroupDuration replicaN default-...

最佳实践概览

通过reindex将自建Elasticsearch数据迁移至阿里云 通过实例私网打通将自建Elasticsearch数据迁移至阿里云 第三方Elasticsearch数据迁移 腾讯云Elasticsearch数据迁移至阿里云 AWS迁移Elasticsearch索引至阿里云 数据库同步 RDS MySQL同步...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 RDS 云数据库 Redis 版 云数据库 MongoDB 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用