从自建Db2迁移至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建的Db2数据库迁移至RDS MySQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成Db2数据库的...
从自建Db2迁移至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建的Db2数据库迁移至RDS MySQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成Db2数据库的...
自建数据源IBM DB2 LUW
本文为您介绍如何创建自建数据源IBM DB2 LUW。仅专业版和高级版的群空间支持创建自建数据源IBM DB2 LUW。前提条件 请确保您的网络连通性：您通过公网连接Quick BI与IBM DB2 LUW数据库，请添加 Quick BI的IP地址 至数据库白名单，请参见 ...
将RDS PostgreSQL作为RDS MySQL实时分析库
psql-h<数据库连接地址>-U<用户名>-p<端口号>-d db2 说明 由于在 创建迁移任务 步骤中创建了数据库db2来接收MySQL迁移的数据，因此，连接PostgreSQL数据库时，数据库名 直接配置成db2。执行 \dn 命令，查看是否将MySQL数据库db1映射为...
CreateAccount
例如，需要授权数据库DB1读写权限，授权数据库DB2只读权限，您需要设置 DBName 为 DB1,DB2，并设置 AccountPrivilege 为 ReadWrite,ReadOnly。仅PolarDB MySQL版集群的普通账号支持设置该参数。ClientToken String 否 6000170000591aed949d...
CreateAccount
例如，需要授权数据库DB1读写权限，授权数据库DB2只读权限，您需要设置 DBName 为 DB1,DB2，并设置 AccountPrivilege 为 ReadWrite,ReadOnly。仅PolarDB MySQL版集群的普通账号支持设置该参数。ClientToken String 否 6000170000591aed949d...
恢复下载后的备份数据
MySQL逻辑备份下载数据的目录结构与示例文件如下：建表语句示例 CREATE TABLE `rds_db`.`orders`(`order_id` bigint(20)COMMENT '',`product_name` varchar(32)CHARSET `utf8` COLLATE `utf8_general_ci` COMMENT '',`price` double ...
同步时源库为Db2 for LUW的注意事项及限制
如果同步的源库为 Db2 for LUW，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。Db2 for LUW同步至PolarDB-X 2.0 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等...
迁移评估概述
目前支持进行对象评估的数据库类型及版本如下：Oracle 数据库：11g/12c/18c/19c MySQL 数据库：5.6/5.7/8.0 DB2 LUW 数据库（仅支持采集文件上传评估）云数据库 RDS PolarDB MySQL 引擎 支持对 Oracle 和 MySQL 数据库的 DDL 语句进行兼容...
常见报错
报错概览 配置备份计划时常见报错 源库测试连接失败 备份恢复预检查时常见报错 源库连接性检查失败 数据库权限检查失败 OSS检查失败 源库binlog开启检查失败 源库binlog模式检查失败 源库binlog_row_image是否为FULL检查失败 源库server_id...
使用MongoShake实现MongoDB实例间的单向同步
支持的数据源 源数据库 目标数据库 ECS上的自建MongoDB数据库 ECS上的自建MongoDB数据库 本地自建的MongoDB数据库 本地自建的MongoDB数据库 阿里云MongoDB实例 阿里云MongoDB实例 第三方云MongoDB数据库 第三方云MongoDB数据库 注意事项 在...
RDS MySQL同步至AnalyticDB for PostgreSQL ...
除MySQL外，DTS还支持以PostgreSQL、SQL Server和DB2作为数据源，具体支持的数据库请参见 支持的数据库。注意事项 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源库的级联、删除等操作不会同步到目标数据库。类型 说明 源库限制 ...
使用mysqldump导入导出数据
如果要对某个表进行分库分表，那么需要手动对建表语句进行修改，PolarDB-X 1.0 建表语句的语法请参考 CREATE TABLE。导入数据文件到 PolarDB-X 1.0。您可以通过如下两种方式的任意一种导入数据文件到 PolarDB-X 1.0。通过 mysql-h ip-P ...
DDL 语法
在使用数据访问代理时，您可以通过 DDL 语句完成建库建表等操作。DDL 基本语句 Sharding DDL 语句 DDL 基本语句 创建数据表 CREATE TABLE IF NOT EXISTS `table_name`(id INTEGER NOT NULL PRIMARY KEY,name VARCHAR(20)NOT NULL,age ...
使用mysqldump导入导出数据
如果未加-no-create-info 参数，导出的dump.sql文件中包含MySQL端的建表语句，也可在文件中修改建表语句。导入数据文件到 PolarDB-X 中。您可以通过如下两种方式导入数据文件到 PolarDB-X：通过 mysql-h ip-P port-u user-pPassword-...
性能测试指南
建表 请根据云数据库ClickHouse集群的规格下载正确的建表语句脚本并执行。单副本版集群建表语句 双副本版集群建表语句 3.下载On Time数据 说明 On Time数据集覆盖的时间区间非常大，下载数据时间较长，同时数据下载过程中会遇到一部分数据...
通过主外键约束消除多余的JOIN
跨数据库连接查询 例如，涉及数据库 db 的 item 表和数据库 db2 的 store_sales 表连接的查询：USE db2;示例查询语句/*PK_FK_DEPENDENCY_ENABLED=true*/EXPLAIN SELECT s.ss_sale_id,s.ss_item_sk FROM store_sales s,db.item WHERE ss_...
Flink数据导入
说明 本文示例中创建的数据库名称为 tpch，建库语句如下：CREATE DATABASE IF NOT EXISTS tpch;本文示例中创建的数据表名为 person，建表语句如下：CREATE TABLE IF NOT EXISTS person(user_id string,user_name string,age int);如果您的 ...
Db2 for LUW迁移至PolarDB-X 2.0
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库迁移至 PolarDB分布式版。前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB分布式版 实例，支持的版本，请参见 迁移方案概览。说明 PolarDB分布式版 需兼容...
表格存储（Tablestore）数据导入
以创建 adb_external_db 数据库为例，建库示例语句如下：create external database adb_external_db;创建外表。说明 AnalyticDB MySQL 外表和TableStore中表的字段名称、字段数量、字段顺序一致，字段类型兼容。数据类型映射关系，请参见 ...
RDS MySQL物理备份文件恢复到自建数据库
本文介绍如何使用Percona XtraBackup工具，将RDS MySQL的物理备份文件恢复到自建数据库。背景 RDS MySQL支持将实例备份文件恢复到自建数据库，当前支持物理备份文件恢复、逻辑备份文件恢复等多种方式。如何选择数据恢复方案，请参见 数据...
SQL转换
ADAM的SQL转换工具可以将Oracle、Teradata、Db2语句转化为MySQL、PolarDB O引擎、云原生数据仓库 AnalyticDB PostgreSQL 版、RDS PostgreSQL、RDS PPAS、PolarDB-X语句。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发...
V5.1.x系列实例版本说明
修复建分库分表时，若同时存在分库分表字段，且分库分表字段一个带英文反引号（`），一个不带，SQL解析列名错误的问题。修复SQL中存在大量OR条件时内存占用过多的问题。修复当SQL中GROUPBY、DISTINCT、AGGREGATE和LIMIT混用时结果错误的...
如何使用HINT（5.2及以下版本适用）
比如有两张逻辑表，分别是t1和t2，它们都是分库分表，建表语句如下：CREATE TABLE `t1`(`id` bigint(20)NOT NULL,`name` varchar(20)NOT NULL,`val` varchar(20)DEFAULT NULL,PRIMARY KEY(`id`))ENGINE=InnoDB DEFAULT CHARSET=utf8 ...
AUTO模式数据库与DRDS模式数据库
PRIMARY KEY(`a`))ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 1 row in set(0.02 sec)上述DDL在AUTO模式数据库建来的表将是一分区表（如下图所示，默认按主键自动分区）：执行 SHOW 语句，查看完整建表语句：SHOW FULL CREATE TABLE tb \G*1....
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
特殊情况 由于源库 Db2 for LUW 为自建数据库，您还需要注意如下事项：在同步时，如果源库进行主备切换，将会导致同步任务失败。由于DTS的延迟时间是根据同步到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行DML操作...
Sysbench使用指南
表结构 对 PolarDB-X 1.0 进行测试时，对Sysbench的测试表稍作改造，将其修改为分库分表的形式，测试表的建表语句如下：CREATE TABLE `sbtest1`(`id` int(10)unsigned NOT NULL,`k` int(10)unsigned NOT NULL DEFAULT '0',`c` char(120)NOT...
Db2 for LUW迁移至PolarDB MySQL版
支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 全量迁移 库表结构迁移 增量迁移 Db2 for LUW CONNECT、SELECT权限 CONNECT、SELECT权限 DBADM权限 PolarDB MySQL版 目标库的读写...
Db2 for LUW迁移至RDS MySQL
特殊情况 由于源库 Db2 for LUW 为自建数据库，您还需要注意如下事项：迁移时源库进行主备切换，会导致迁移任务失败。由于DTS的延迟时间是根据迁移到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行DML操作可能导致延迟...
Db2 for LUW迁移至云原生数据仓库 AnalyticDB ...
支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 全量迁移 库表结构迁移 增量迁移 Db2 for LUW CONNECT、SELECT权限 CONNECT、SELECT权限 DBADM权限 AnalyticDB PostgreSQL版 目标库...
Db2 for LUW同步至PolarDB-X 2.0
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库同步至 PolarDB分布式版。前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB分布式版 实例，支持的版本，请参见 同步方案概览。说明 PolarDB分布式版 需兼容...
CREATE TABLE AS SELECT（CTAS）
支持 db_name.table_name 格式，区分不同数据库下相同名字的表。IF NOT EXISTS 判断 table_name 指定的表是否存在，若存在，则不执行建表语句。IGNORE 可选参数，若表中已有相同主键的记录，新记录不会被写入。REPLACE 可选参数，若表中已...
数据存储
示例 CREATE TABLE example_db.example_table(k1 SMALLINT,k2 INT,k3 DATE,v1 INT SUM,v2 DATETIME MAX DEFAULT"2014-02-04 15:36:00")ENGINE=olap AGGREGATE KEY(k1,k2,k3)PARTITION BY RANGE(k1)()DISTRIBUTED BY HASH(k2)BUCKETS 32 ...
Db2 for LUW同步至PolarDB MySQL版
特殊情况 由于源库 Db2 for LUW 为自建数据库，您还需要注意如下事项：在同步时，如果源库进行主备切换，将会导致同步任务失败。由于DTS的延迟时间是根据同步到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行DML操作...
Spark SQL
在数据湖 元信息发现、T+1全量同步一键建仓 中创建的库表结构,可以被Spark读取并使用，Spark SQL创建或者修改的元数据也可以被其他引擎访问到。下图是Spark SQL和DLA SQL与元数据服务之间的关系。登录 DLA控制台，单击左侧导航栏的 SQL执行...
流式ETL
输出组件（即目标库）当前支持 自建MySQL、RDS MySQL、PolarDB MySQL版、云原生数据仓库AnalyticDB MySQL版 3.0、自建Oracle、自建PostgreSQL、RDS PostgreSQL、Db2 for LUW、Db2 for i、PolarDB PostgreSQL版。Flink SQL模式 ETL支持使用...
什么是ETL
输出组件（即目标库）当前支持 自建MySQL、RDS MySQL、PolarDB MySQL版、云原生数据仓库AnalyticDB MySQL版 3.0、自建Oracle、自建PostgreSQL、RDS PostgreSQL、Db2 for LUW、Db2 for i、PolarDB PostgreSQL版。Flink SQL模式 ETL支持使用...
Db2 for LUW同步至RDS MySQL
特殊情况 由于源库 Db2 for LUW 为自建数据库，您还需要注意如下事项：在同步时，如果源库进行主备切换，将会导致同步任务失败。由于DTS的延迟时间是根据同步到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行DML操作...
Db2 for LUW迁移至阿里云消息队列Kafka版
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库迁移至 阿里云消息队列Kafka版。前提条件 已创建存储空间大于源 Db2 for LUW 数据库占用存储空间的目标 阿里云消息队列Kafka版 实例。更多信息，请参见 概述。说明 ...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
特殊情况 由于源库 Db2 for LUW 为自建数据库，您还需要注意如下事项：在同步时，如果源库进行主备切换，将会导致同步任务失败。由于DTS的延迟时间是根据同步到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行DML操作...
- 产品推荐
- 这些文档可能帮助您