场景:配置分库分表离线同步任务

说明 仅MySQL、PolarDB、AnalyticDB支持通过向导模式添加分库分表,其他数据库请切换至脚本模式配置分库分表同步。脚本模式配置分库分表:脚本示例如下,完整的任务配置步骤请参见 通过脚本模式配置离线同步任务。重要 实际运行时,请删除...

MySQL分库分表实践

本文为您介绍如何通过DataWorker数据集成和Flink两种方式将MySQL分库分表数据写入至Hologres同一个表中,通过本实践您可以根据业务场景选择合适的方式将MySQL分库分表数据写入Hologres。背景信息 实际业务场景下数据同步通常不能通过一个...

数据类型转换

本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时,数据类型转换的支持范围。支持的转换类型 数值类型 分类 MySQL 数据库 OceanBase 数据库 MySQL 租户 整型 支持指定字段长度,SIGNED、UNSIGNED、ZEROFILL。INT INT ...

分库分表问题

常见分库分表问题列表:分库分表是否支持多个拆分字段 分库分表是否支持跨库 JOIN 分库分表拆分库表的数量是否有限制 分库分表是否支持多个拆分字段 数据访问代理分库分表功能支持多个拆分字段,但是如果配置了拆分字段,后续执行 SQL 均...

分库分表

数据拆分 数据库访问代理支持库级拆分,表级拆分和分库分表拆分,通过数据库访问代理 DDL 语句指定,具体操作参见 DDL 语法。数据访问代理根据指定拆分键的值,采用特定的算法进行计算,然后根据计算结果将数据存储到对应的分库/分表中。...

管理MySQL Catalog

例如,有一个分库分表MySQL数据库,包括user01、user02和user99等多个表,分散在db01~db10等数据库中,且所有表的Schema都相互兼容,则可以通过如下正则表达式的库名表名来访问到所有user的分库分表。SELECT.FROM `db.*`.`user.*`/*+...

注意事项

如果数据库分片集群是分库分表模式,则所有数据库分表都需要配置分库分表规则,如果数据库分片中只有单表,分库分表规则可以直接配置 0 即可。在如下配置中,single_table 会路由到 group_00 分片:使用限制 仅支持 DML 语句(INSERT、...

应用场景

支持将MySQL分库分表数据聚合到同一张表中,提供全局数据分析能力。交互式查询 该场景要求支持实时BI报表和自定义多维查询,响应流畅,交互体验好;任意选择分析维度,无需事先建模和预计算,便于进行探索式分析。该场景可实现:查询速度...

SQL 路由

有关数据访问代理的数据拆分原理,请参考文档 分库分表。拆分键 分库分表过程中,数据访问代理按照指定的拆分键,采用特定的算法进行计算,然后根据计算结果将数据存储到对应的分表中。拆分键是数据访问代理中数据分布和 SQL 路由的凭证。...

RDS/PolarDB 数据源配置分库分表

本文介绍如何在OpenSearch行业算法版和高性能检索版实例中配置分库分表数据源。一般用户的分库分表分两种情况:单库多表:database1 table1、table2、table3、table4.多库多表:database1 database2 database3.table1、table2、table3、...

RDS/PolarRDB 数据源配置分库分表

本文介绍如何在OpenSearch行业算法版和高性能检索版实例中配置分库分表数据源。一般用户的分库分表分两种情况:单库多表:database1 table1、table2、table3、table4.多库多表:database1 database2 database3.table1、table2、table3、...

扩展性原理

并发和存储容量扩展性 扩展性本质在于分而治之,PolarDB-X 1.0 计算资源通过 水平拆分分库分表)和 垂直拆分,将数据分散到多个存储资源MySQL以实现获取数据读写并发和存储容量分散的效果。水平拆分分库分表)您可以通过一定的计算或...

使用拆分字段

拆分原则 数据表拆分的首要原则,就是要尽可能找到数据表中的数据在业务逻辑上的主体,并确保大部分(或核心的)数据库操作都是围绕这个主体的数据进行,然后可使用该主体对应的字段作为拆分字段,进行分库分表。选择业务逻辑主体 业务逻辑...

其他SQL功能差异

AnalyticDB MySQL不支持的MySQL 5.6功能 数据库管理(Database Administration)插件和自定义函数(Plugin and User-Defined Function)SET 复合查询(Compound)数据备份(Replication)存储对象(Stored Objects)事务和锁定...

添加兼容MySQL数据库数据

本文档介绍在DataV中添加兼容MySQL数据库数据源的方法,以及相关参数配置说明。通过兼容MySQL数据库的数据源,您可以使用旧版本的MySQL数据库作为组件的数据源。前提条件 已准备好待添加的兼容MySQL数据库数据源。操作步骤 登录 DataV控制...

删除索引 DROP INDEX 的不兼容点

本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时,MySQL 数据库执行的 DROP INDEX DDL 支持被数据传输的 DDL 同步组件转换,但 OceanBase 数据库 MySQL 租户不支持执行的场景。删除有外键依赖的 INDEX 有外键依赖的 ...

MySQL分库分表同步至Hologres(方案1.0)

在本实践中,我们需要将MySQL数据库中的12张分库分表写入对应的两张Hologres表中。设置表(库)名映射规则如下:源表名和目标表名转换规则:支持将源表名通过正则表达式转换为目标表名。如上图所示设置 源 为要搜索的字符串 t_order.*,将...

绑定或解绑RAM用户与数据库账号

RAM用户与AnalyticDB MySQL数据库普通账号映射场景 SQL编辑器:使用RAM用户登录SQL编辑器,需要映射成 AnalyticDB MySQL 数据库普通账号进行库表鉴权。JDBC连接方式:使用 AnalyticDB MySQL 数据库普通账号登录,需要映射成RAM用户进行外表...

绑定或解绑RAM用户与数据库账号

RAM用户与AnalyticDB MySQL数据库普通账号映射场景 SQL编辑器:使用RAM用户登录SQL编辑器,需要映射成 AnalyticDB MySQL 数据库普通账号进行库表鉴权。JDBC连接方式:使用 AnalyticDB MySQL 数据库普通账号登录,需要映射成RAM用户进行外表...

修改表 ALTER TABLE 的不兼容点

本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时,MySQL 数据库执行的 ALTER TABLE DDL 支持被数据传输的 DDL 同步组件转换,但 OceanBase 数据库 MySQL 租户不支持执行的场景。行内 CHECK 表达式中引用了其它列 ...

创建表 CREATE TABLE 的不兼容点

本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时,MySQL 数据库执行的 CREATE TABLE DDL 支持被数据传输的 DDL 同步组件转换,但 OceanBase 数据库 MySQL 租户不支持执行的场景。在生成列的基础上再定义生成列 通过 ...

【通知】2024年03月起DBS数据源页面功能逐步变更

为提供更高效便捷的数据备份服务以及提升产品使用体验,2024年03月起 数据库备份DBS 将逐步对 数据源 页面相关功能进行变更,变更后您可直接在 数据源 页面新增或同步数据源,配置MySQL逻辑备份(支持 阿里云RDS MySQL数据库、ECS自建MySQL...

不兼容点概述

本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时,MySQL 数据库执行的 DDL 支持被数据传输的 DDL 同步组件转换,但 OceanBase 数据库 MySQL 租户不支持执行的场景。版本说明 MySQL 数据库:8.0 版本。OceanBase 数据...

FineBI 6.0

本文测试了FineBI 6.0与 AnalyticDB MySQL 在连通性、列举表、查看表数据等方面的...测试范围 连接FineBI 说明 此处应填写MySQL数据库的连接信息,而不是AnalyticDB for MySQL数据库连接信息。新建数据库连接 列举表 查看表结构 查看表数据

有约束的列修改类型

本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中,对比类型空白表示相应约束下不支持该类型、短横线(-)表示没有、all 表示全部类型。主键(PRIMAEY KEY)约束下...

删除有约束的列

本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中,对比类型空白表示相应约束下不支持该类型。删除主键(PRIMARY KEY)约束下的列 如果删除的 主键列 中包含下表中的字段类型...

创建索引或约束支持的字段类型

本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于不同约束支持的字段类型不兼容的场景。主键(PRIMARY KEY)字段类型 通过 CREATE TABLE DDL 创建 PRIMARY KEY 时,MySQL 数据库和 OceanBase 数据库 MySQL 租户支持的字段类型...

MySQL分库分表同步至Hologres(方案2.0)

本文将以MySQL分库分表实时写入实时数仓Hologres场景为例,为您介绍分库分表写入Hologres数据集成最佳实践。前提条件 已完成Hologres和MySql数据源配置。您需要将数据库添加至DataWorks上,以便在同步任务配置时,可通过选择数据源名称来...

有约束的列修改长度

本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段长度的不兼容场景。说明 本文表格中,对比类型空白表示相应约束下不支持该类型、短横线(-)表示没有。主键(PRIMARY KEY)约束下字段长度的修改 ...

数据迁移方案概览

从自建Oracle迁移至阿里云 数据导入 从CSV文件、TXT文件或SQL脚本导入数据到RDS 将第三方云数据库迁移至阿里云 腾讯云云数据库MySQL迁移到阿里云 Google Cloud SQL for MySQL数据库迁移到阿里云 百度智能云云数据库RDS MySQL迁移到阿里云 ...

功能特性

数据访问代理兼容 MySQL 协议和语法,支持分库分表、平滑扩容、服务升降配、透明读写分离和分布式事务等特性,具备分布式数据库全生命周期的运维管控能力。分库分表 支持 RDS、OceanBase、MySQL分库分表。在创建分布式数据库后,只需...

DataV

域名 连接 AnalyticDB MySQL 数据库的URL地址。说明 此处的URL地址不是官网页面的URL,也不是本机的IP,是需要DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的URL地址。例如使用外网环境下的阿里云 AnalyticDB MySQL,域名...

查看代理监控数据

使用RDS MySQL数据库代理时,您可以随时查看数据库代理的CPU使用率,了解数据库代理的负载情况,以便及时调整代理数量(规格)。本文介绍如何通过控制台和API接口查看RDS MySQL数据库代理的CPU使用率。前提条件 已开通数据库代理 操作步骤 ...

永洪BI

完成上述参数配置后,单击 测试连接 进行连通性测试,系统提示测试成功后,即可连接至指定的 AnalyticDB MySQL 数据库。使用永洪BI 通过永洪BI连接 AnalyticDB MySQL 集群后,您就可以获取 AnalyticDB MySQL 中的数据,然后通过永洪BI制作...

MySQL数据库对外键和索引等名称的长度限制导致创建时...

问题描述 RDS产品的MySQL数据库创建索引报如下错误。Identifier name 'XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX' is too long 问题原因 因为 MySQL数据库 对外键和索引等名称的长度有限制,具体如下:Identifier...

RDS MySQL快照备份文件恢复到自建数据库

您可以使用RDS MySQL的备份下载功能,将云盘实例的快照备份数据转换成CSV文件或SQL文件导出,然后通过该文件将数据恢复到自建MySQL数据库中。前提条件 RDS实例需满足以下条件:MySQL数据库版本:8.0、5.7 存储类型:云盘 说明 您可以前往...

产品架构

产品架构图 内核架构 PolarDB-X 1.0 由计算层实例与存储层私有定制RDS实例组成,通过挂载多个MySQL进行分库分表水平拆分。如同大多数传统单机关系型数据库,PolarDB-X 1.0 分为网络层、协议层、SQL解析层、优化层和执行层,其中优化层包含...

AnalyticDB MySQL助力Flowerplus业务高速发展

复杂数据查询性能 使用传统MySQL数据库对订单、商品流量、采购、业务转化率以及商品售罄报警等分析时速度较慢,数据达到千万级或者亿级时,复杂查询报表返回很慢或者根本无法返回,无法正常支撑报表和BI业务。数据实时性 部分报表对返回...

从自建MySQL迁移至PolarDB MySQL版(mysqldump工具)

本文介绍如何使用mysqldump工具将自建MySQL数据库迁移至 PolarDB MySQL版。前提条件 目标 PolarDB MySQL版 集群需已完成如下操作:创建数据库 创建数据库账号 设置白名单 申请公网连接地址 迁移方式对比 您可以通过mysqldump或DTS工具将自...

MySQL分库分表同步至MaxCompute

本文以MySQL分库分表实时写入MaxCompute场景为例,为您介绍如何通过数据集成同步分库分表数据至MaxCompute。前提条件 已完成MaxCompute和MySQL数据源配置。您需要将数据库添加至DataWorks上,以便在同步任务配置时,可通过选择数据源名称来...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用