从ECS上的自建MySQL同步至RDS

前提条件 自建MySQL数据库版本为5.1、5.5、5.6、5.7或8.0版本。已创建 RDS MySQL实例 或 Serverless实例。注意事项 DTS在执行全量数据初始化时占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低...

通过Spark SQL读写OSS外表

创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录,且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径,请先创建对应...

基础版Spark全密态计算引擎使用示例

数据准备 本文示例的RDS MySQL数据库名为 adb,并在该库中创建了一张名为 customer 的表,示例如下:CREATE DATABASE IF NOT EXIST adb;CREATE TABLE IF NOT EXISTS adb.customer(id int,name varchar(1023),address varchar(1023),age int...

从通过专线、VPN网关或智能接入网关接入的自建MySQL...

增量数据迁移 在全量迁移的基础上,DTS会读取自建MySQL数据库的binlog信息,自建MySQL数据库的增量更新数据同步到目标RDS MySQL实例中。通过增量数据迁移可以实现在自建应用不停服的情况下,平滑地完成MySQL数据库的迁移上云。增量数据...

删除有约束的列

本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中,对比类型空白表示相应约束下不支持该类型。删除主键(PRIMARY KEY)约束下的列 如果删除的 主键列 中包含下表中的字段类型...

OceanBase 数据库 MySQL 租户至 MySQL 数据库的同步 ...

本文为您介绍迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库时,支持的同步 DDL。同步 DDL 支持的范围 创建表 CREATE TABLE 说明 不支持 CREATE TABLE AS SELECT。删除表 DROP TABLE 清空表 TRUNCATE TABLE 修改列 ALTER TABLE ...

Microsoft Azure Database for MySQL数据库迁移到阿里...

本文介绍Microsoft Azure Database for MySQL数据库迁移到阿里云的步骤及注意事项。前提条件 源端及目标端 要求 相关参考 源端 Microsoft Azure Database for MySQL实例 已开通公网访问,并获取外网连接地址及端口。已创建高权限账号。如果...

通过一键建仓同步至数仓版

已创建PolarDB MySQL数据库。更多信息,请参见 数据库管理。PolarDB MySQL数据库中已存在表数据。计费 一键创建PolarDB MySQL数据仓库时,系统自动通过DTS同步数据,DTS计费规则,请参见 计费概述。注意事项 数据同步过程中,若在源实例...

使用DMS连接RDS时报“running with the-rds-deny-...

问题描述 本文主要介绍 使用DMS连接RDS实例时报如下错误的解决方法。The MYSQL server is running with the-rds-deny-access option so it cannot execute this statement 系统显示类似如下。问题原因 一般是如下原因导致RDS实例被锁定:...

创建 MySQL 数据库

我们在 tutorial_mysql 租户下,创建名为 tutorial_database 的数据库。云数据库 OceanBase 的 MySQL 模式兼容 MySQL 5.7/8.0 的绝大部分功能和语法,更多内容参见 与 MySQL 兼容性对比。操作步骤 单击左侧导航栏 租户管理,进入租户列表...

DBeaver

背景信息 DBeaver是一款免费、开源(GPL)的专门为开发人员和数据库管理员提供的通用数据库工具。DBeaver支持MySQL、PostgreSQL、Oracle、DB2、MSSQL、Sybase以及其他兼容JDBC的数据库。您可以通过DBeaver的图形界面查看数据库结构、执行...

DEADLOCK(死锁)

由于事务更新历史中存在跨分区的可能,因此分布式数据库将强行锁定所有未通过HybridDB for MySQL死锁检测且被清除的事务,强制用户只能进行 rollback 而不得进行其它任何操作。对于那个通过 HybridDB for MySQL死锁检测的事务,后续的操作...

通过一键建仓同步至数仓版

已创建RDS MySQL数据库。更多信息,请参见 创建数据库。RDS MySQL数据库中已存在表数据。计费 一键创建RDS MySQL数据仓库时,系统自动通过DTS同步数据。DTS计费规则,请参见 计费概述。注意事项 数据同步过程中,若在源实例RDS MySQL中新增...

性能测试指导

本文介绍RDS MySQL实例性能测试的方法。前提条件 快速创建RDS MySQL实例。创建ECS实例。背景信息 实例性能测试的指标包括:每秒执行事务数TPS(Transactions Per Second)数据库每秒执行的事务数,以COMMIT成功次数为准。SysBench标准OLTP...

申请和释放公网地址

云原生数据仓库AnalyticDB MySQL版 集群支持VPC地址和公网地址两种类型的地址,如果需要通过公网连接集群,您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高,推荐您使用VPC...

同步时源MySQL的注意事项及限制

若您列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中,可能会因为MySQL数据库列名大小写不敏感,导致同步结果不符合预期。在数据同步完成后,建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如,在MySQL触发HA...

通过DTS导入数据

操作方法 您可以选择数据同步或数据迁移任意一种方式,RDS MySQL数据导入至 AnalyticDB MySQL 湖仓版(3.0)或 数仓版(3.0)。具体操作,请参见:RDS MySQL同步至AnalyticDB MySQL 3.0。RDS MySQL迁移至AnalyticDB MySQL 3.0。

通过DataWorks导入数据

本文介绍如何通过DataWorksRDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或 数仓版(3.0)。前提条件 已购买合适规格的独享数据集成资源组。详情请参见:新增和使用独享数据集成资源组。已完成数据集成资源组与数据源的网络连通...

新功能发布记录

此外,您还可以下载的CSV或SQL格式的备份文件恢复到自建MySQL数据库中。04-15 下载备份 RDS MySQL快照备份文件恢复到自建数据库 03月 类别 功能名称 功能描述 发布时间 相关文档 新增 云盘实例大版本升级 RDS MySQL基础系列ESSD云盘实例...

RDS MySQL实例间的单向同步

数据传输服务DTS(Data Transmission Service)支持两个MySQL数据库之间的数据同步,本文以RDS MySQL实例之间的单向同步为例,介绍配置流程。前提条件 数据同步的源RDS实例和目标RDS实例已存在,详情请参见 创建RDS实例。源RDS实例和目标...

其他SQL功能差异

AnalyticDB MySQL不支持的MySQL 5.6功能 数据库管理(Database Administration)插件和自定义函数(Plugin and User-Defined Function)SET 复合查询(Compound)数据备份(Replication)存储对象(Stored Objects)事务和锁定...

MySQL批量导入导出

HybridDB for MySQL支持直接从MySQL中全量导入和导出数据,这也是HybridDB for MySQL的功能之一,相比较借助DTS、Kettle等工具,HybridDB for MySQL直通导入和导出节省了大量的中间转换,导入导出的速度要快10倍以上。导入准备 将数据从...

从自建Db2迁移至RDS MySQL

全量数据迁移 DTS会Db2数据库迁移对象的存量数据,全部迁移到目标RDS MySQL数据库中。增量数据迁移 在全量迁移的基础上,DTSDb2数据库的增量更新数据同步到目标RDS MySQL中。通过增量数据迁移可以实现在自建应用不停服的情况下,平滑地...

常见报错

源库binlog存在性检查失败 报错场景:自建MySQL数据库启动备份计划,显示源库binlog存在性检查失败。解决方法:进入MySQL命令行,使用以下命令查看binlog日志是否开启:SHOW variables LIKE 'log_%';如果binlog日志未开启(如下图所示),...

不同编程语言中如何开启客户端的PrepareStatement

AnalyticDB MySQL 数据库自身具备强大的查询计算能力和计划缓存功能,无需依靠服务器端预处理语句获得大部分性能优势。AnalyticDB MySQL 数据库不建议使用服务器端预编译。大部分开发语言中支持通过配置开启客户端预编译(PrepareStatement...

访问MongoDB数据

本文介绍如何使用 AnalyticDB MySQL版 湖仓版(3.0)Spark访问云数据库MongoDB数据。前提条件 已创建AnalyticDB MySQL湖仓版(3.0)集群。具体操作,请参见 创建湖仓版(3.0)集群。已创建数据库账号。如果您是通过阿里云账号访问,只需...

应用场景

在基于 MySQL 数据库的系统架构下,存放着设备信息的库表,往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度,也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...

从OSS批量导入导出

这一步是要确定HybridDB for MySQL数据导出到OSS后要存储到哪个存储目录下,HybridDB for MySQL的导出会根据并发度来动态地确定要导出到指定存储目录下的数据文件数目。在HybridDB for MySQL中建立一张外表映射到MySQL的数据表。这一步的...

Notebook开发编辑器

AnalyticDB MySQL 湖仓版(3.0)集群中的Notebook开发是 基于控制台的交互式数据分析开发平台,提供了作业编辑、数据分析、数据可视化等功能。Notebook开发 支持 Spark SQL和Python两种 编程语言编写Spark应 用程序。前提条件 已创建...

Power BI

说明 Power BI自动检测您的系统是否安装 MySQL Connector,若未安装,请根据提示安装6.9.3版本的MySQL Connector。在 Server 和 Database 中分别填写 AnalyticDB MySQL版 的连接地址和数据库名称,然后单击 OK。在 User Name 和 Password...

数据库扩缩容

在使用HybridDB for MySQL的过程中,随着您的数据量和计算量的动态增长,一些计算资源如CPU、磁盘、内存以及数据处理节点数量限制数据处理速度。为了支持实例的动态扩展,HybridDB for MySQL提供了在线扩容数据库的功能。注意 数据库扩容...

通过Spark SQL访问MySQL数据

AnalyticDB MySQL 湖仓版(3.0)支持提交Spark SQL作业,您可以通过View或Catalog两种方式访问自建MySQL数据库或云数据库RDS MySQL、云原生数据库 PolarDB MySQL。本文以RDS MySQL为例,介绍如何通过Spark SQL访问RDS MySQL数据。前提条件 ...

从RDS同步到云原生数据仓库 AnalyticDB MySQL

术语/概念对应关系 MySQL 云原生数据仓库AnalyticDB MySQL 数据库 云原生数据仓库AnalyticDB MySQL(2.0):表组 云原生数据仓库AnalyticDB MySQL(3.0):数据库 表 云原生数据仓库AnalyticDB MySQL(2.0):表 云原生数据仓库AnalyticDB ...

DUMP TO OSS(2.0版)

本文介绍何如AnalyticDB MySQL 2.0的数据导出到对象存储(OSS)。语法/*+dump-col-del=[,],dump-row-del=[],dump-oss-accesskey-id=ACCESS_KEY_ID,dump-oss-accesskey-secret=ACCESS_KEY_SECRET,engine=MPP,[return-dump-record-count=...

FineBI

配置外接MySQL数据库,导入数据失败 处理方法:检查版本号和编码方式。具体操作,请参见 配置外接数据库,目前FineBI支持MySQL 5.x版本。检查外接MySQL数据库是否使用utf8(– UTF-8 Unicode)编码为字符集排列规则,或新建一个utf8编码的...

DUMP TO MAXCOMPUTE(2.0版)

本文介绍何如AnalyticDB MySQL 2.0的数据导出到MaxCompute中。语法/*+engine=MPP,[return-dump-record-count=TRUE,]dump-header=[DUMP DATA[OVERWRITE]INTO 'odps:/project_name/table_name']*/sql 参数 engine=MPP:计算引擎,必选参数...

API概览

DescribeAdbMySqlTables 查询数据库下所有表信息 枚举AnalyticDB MySQL湖仓版(3.0)集群指定数据库下所有表信息。DescribeAdbMySqlSchemas 查询所有数据库列表 枚举指定AnalyticDB MySQL湖仓版(3.0)集群下所有数据库列表。GetViewDDL ...

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

本文以RDS MySQL数据源为例,介绍如何通过DTSRDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件 根据 RDS MySQL快速入门,准备好测试数据。根据 AnalyticDB MySQL版2.0快速入门 完成数据库创建、表组创建等准备工作。背景...

Job型资源组的优先级队列

本文介绍设置 湖仓版(3.0)Job型资源组的作业优先级和查看优先级的方法。前提条件 AnalyticDB MySQL 湖仓版(3.0)集群的内核版本为3.1.6.3及以上版本。已创建Job型资源组,且提交作业时选择在Job型资源组中运行。注意事项 暂不支持修改已...

工作负载管理介绍

AnalyticDB MySQL 集群在数据库系统中提供了工作负载管理模块,通过工作负载管对工作负载的控制,可以提高集群的整体运行状态,满足集群更精细化控制的目的。前提条件 AnalyticDB MySQL 集群需要同时满足以下条件:集群系列需为数仓版(3.0...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 数据库备份 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用