本文介绍数据管理DMS支持录入的云数据库、他云/自建的数据库类型。支持的云数据库 关系型数据库 RDS MySQL RDS SQL Server RDS PostgreSQL RDS MariaDB PolarDB MySQL版 PolarDB PostgreSQL版 PolarDB PostgreSQL版(兼容Oracle)PolarDB...
如何将查询并行起来 对于一个类OLAP的查询,它通常是对大批量数据的查询,数据量大意味着数据远大于数据库的内存容量,大部分数据可能无法缓存到数据库的缓冲区中,而必须在查询执行时才动态加载到缓冲区中,这样就会造成大量IO操作,而IO...
警告 如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等)或ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中,您无需手动添加,请参见 DTS服务器的IP...
源数据库(单节点架构)目标数据库(所有架构)云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据...
权限类型 数据库级别 表组级别 表级别 列级别 说明 SELECT ✔️ ✔️ ✔️ ✔️ 查询数据。LOAD DATA ✔️ ✔️ ✔️ ✖️ 导入表(分区)数据。DUMP DATA ✔️ ✔️ ✔️ ✖️ 导出表(分区)数据。DESCRIBE ✔️ ✔️ ✔️ ✖️ 查看数据...
支持的源和目标数据库 源数据库(副本集架构)目标数据库(副本集架构、分片集群架构)云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能...
如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中,您还需确保自建数据库没有限制ECS的访问(若数据库是集群部署在多个ECS实例,您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
源数据库 目标数据库 云数据库MongoDB版(副本集架构)云数据库MongoDB版(副本集架构、分片集群架构)ECS上的自建MongoDB数据库(副本集架构)ECS上的自建MongoDB数据库(副本集架构、分片集群架构)通过专线、VPN网关或智能网关接入的自...
数据库列表 var databasesToProcess=["database1","database2","database3"];shardNames.forEach(function(shardName){/遍历指定的数据库列表 databasesToProcess.forEach(function(dbName){ var dbInstance=db.getSiblingDB(dbName);获取...
由于全量数据迁移会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表存储空间会比源数据库的表存储空间大。DTS会尝试恢复七天之内迁移失败任务。因此业务切换至目标实例前,请务必结束或释放该任务,...
数据库 是 在数据库下拉框中,搜索并选择目标数据库。重要 非安全协同模式的数据库,如果数据库的账号发生变更(如密码、权限变更),可能导致任务运行失败,需要重新登录数据库并保存节点配置。Spark SQL引用别名 是 输入该数据库在Spark ...
如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中,您还需确保自建数据库没有限制ECS的访问(若数据库是集群部署在多个ECS实例,您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
目标端为 MySQL 数据库、OceanBase 数据库 MySQL 租户等数据库类型时,需要对源端待迁移数据库及 oceanbase 数据库具备 SELECT 权限。重要 仅 OceanBase 数据库 V4.0.0 及之后版本需要添加 oceanbase 数据库的 SELECT 权限。对于 VPC 内 ...
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...
数据传输服务DTS(Data Transmission Service)支持 云数据库MongoDB版(副本集架构)间的双向同步。前提条件 已创建源和目标 云数据库MongoDB版(副本集架构)实例,创建方式,请参见 创建副本集实例。重要 支持的版本,请参见 同步方案...
说明 当目标实例或目标数据库的类型为PolarDB PostgreSQL版(兼容Oracle)、AnalyticDB PostgreSQL、PostgreSQL、MaxCompute、MongoDB数据库时,本参数才可用且必须传入。若目标库为MaxCompute,您需要填写为MaxCompute实例的Project。...
数据传输服务DTS(Data Transmission Service)支持 云数据库MongoDB版(分片集群架构)间的双向同步,适用于异地多活(单元化)、数据异地容灾等多种应用场景。本文介绍双向数据同步的配置步骤。前提条件 已创建源和目标 云数据库MongoDB...
如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等),DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单;如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添到...
如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等),DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单;如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添到...
RDS MySQL 删除数据库 RDS PostgreSQL 删除数据库 RDS SQL Server 删除数据库 RDS MariaDB 删除数据库 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试...
RDS MySQL 删除数据库 RDS PostgreSQL 删除数据库 RDS SQL Server 删除数据库 RDS MariaDB 删除数据库 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试...
RDS MySQL 删除数据库 RDS PostgreSQL 删除数据库 RDS SQL Server 删除数据库 RDS MariaDB 删除数据库 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试...
RDS MySQL 删除数据库 RDS PostgreSQL 删除数据库 RDS SQL Server 删除数据库 RDS MariaDB 删除数据库 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试...
RDS MySQL 删除数据库 RDS PostgreSQL 删除数据库 RDS SQL Server 删除数据库 RDS MariaDB 删除数据库 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试...
数据传输服务DTS(Data Transmission Service)支持将 云数据库MongoDB版(分片集群架构)实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码,结合同步至函数中的数据,对数据进行二次加工。前提条件 已创建源 云数据库...
对于 MySQL 模式,角色为数据库(Database)级别,其有以下几类:ReadWrite:读写权限,包括 ALL PRIVILEGES;ReadOnly:只读权限,包括 SELECT;DDL:DDL 权限,包括 CREATE,DROP,ALTER,SHOW VIEW,CREATE VIEW;DML:DML 权限,包括 SELECT,...
数据传输服务DTS(Data Transmission Service)支持将 云数据库MongoDB版(副本集架构)实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码,结合同步至函数中的数据,对数据进行二次加工。前提条件 已创建源 云数据库MongoDB...
背景信息 当需要使用RDS PostgreSQL数据库特有的功能来分析MySQL中的数据,使用GIS处理时空数据或进行用户画像分析时,可以使用DTS功能将RDS MySQL中的数据实时迁移到RDS PostgreSQL数据库中,使PostgreSQL数据库作为MySQL的实时分析库。...
有两种可能的情况会导致云数据库ClickHouse将缓冲区刷新到磁盘上:缓冲区已达到N KB的大小(N可以通过async_insert_max_data_size进行配置)。距离上次缓冲区刷新已经过去了至少N毫秒(N可以通过async_insert_busy_timeout_ms进行配置)。...
注意事项 类型 说明 源库限制 同步对象要求:待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能会导致目标数据库中出现重复数据。如果您的自建Oracle版本为12c及以上,待同步表的名称长度需不超过30个字节。如同步对象为表级别...
本文将介绍如何在Java应用中使用JDBC连接 PolarDB PostgreSQL版(兼容Oracle)数据库。前提条件 已经在 PolarDB 集群创建用户,如何创建用户请参见 创建数据库账号。已经将需要访问 PolarDB 集群的主机IP地址添加到白名单,如何添加白名单...
本文将介绍如何使用 Tomcat 连接池、OceanBase Connector/J 和 OceanBase 数据库构建一个应用程序,实现基本的数据库操作,包括创建表、插入、删除、更新和查询数据等。点击下载 tomcat-mysql-client 示例工程 前提条件 您已安装 OceanBase...
本文介绍Microsoft Azure Database for MySQL数据库迁移到阿里云的步骤及注意事项。前提条件 源端及目标端 要求 相关参考 源端 Microsoft Azure Database for MySQL实例 已开通公网访问,并获取外网连接地址及端口。已创建高权限账号。如果...
本文将介绍如何使用 Commons Pool、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序,实现基本的数据库操作,包括创建表、插入数据、更新数据、删除数据、查询数据和删除表等。点击下载 commonpool-mysql-client 示例工程 前提条件...
当前在Spark中仅支持External类型数据库和表的创建和读写操作。当前Spark连接数据湖元数据服务,只支持 外表(External Table)的读写和创建操作。这意味着在建立数据库时,需要显式指定 LOCATION 信息,类似如下的SQL语句。CREATE DATABASE...
DMS支持PostgreSQL的数据库(Database)管理与模式(Schema)管理。登录 数据管理DMS 5.0。在DMS左侧的实例列表中,右键单击目标实例,从弹出的列表中选择 数据库管理。若您需要管理模式,请在DMS左侧的实例列表中展开目标实例,右键单击...
操作失败,当前数据库类型不支持该操作。404 InvalidDBInstanceName.NotFound The database instance does not exist.数据库实例名称不存在。请确认数据名称是否正确。404 IncorrectDBInstanceLockMode Current DB instance lock mode does...
支持的数据库类型 源数据库:Oracle、Teradata、DB2 for LUW。目标库:PolarDB MySQL引擎、PolarDB PostgreSQL引擎、PolarDB O引擎、PolarDB-X、RDS MySQL、RDS PostgreSQL、AnalyticDB PostgreSQL版。新建数据库档案 如下以目标数据库为 ...
支持审计的数据库类型 数据库分类 数据库 版本 阿里云原生数据库 RDS MySQL 5.5、5.6、5.7、8.0 PolarDB MySQL引擎 所有版本 PolarDB PostgreSQL引擎 所有版本 PolarDB O引擎 所有版本 PolarDB-X(原DRDS)所有版本 RDS SQL Server 2008 R2...
您需要登录图数据库GDB才能对数据库内的数据进行查询和分析,本教程以DMS为例介绍如何登录数据库。前提条件 已根据快速入门完成创建账号步骤,具体操作请参见 创建账号。操作步骤 登录 DMS数据管理服务控制台。单击页面左侧 数据库实例 旁...