应用场景
业务复杂度高是该类业务的典型特征 典型的应用场景如下：分库分表后的跨数据库分布式事务 例如支付宝的交易服务，随着业务规模的增大，单个交易流水表已经不能满足业务需求，需要通过分库分表实现数据水平拆分。但是水平拆分后，单表的数据...
场景：配置分库分表离线同步任务
说明 仅MySQL、PolarDB、AnalyticDB支持通过向导模式添加分库分表，其他数据库请切换至脚本模式配置分库分表同步。脚本模式配置分库分表：脚本示例如下，完整的任务配置步骤请参见 通过脚本模式配置离线同步任务。重要 实际运行时，请删除...
MySQL分库分表实践
本文为您介绍如何通过DataWorker数据集成和Flink两种方式将MySQL分库分表的数据写入至Hologres同一个表中，通过本实践您可以根据业务场景选择合适的方式将MySQL分库分表数据写入Hologres。背景信息 实际业务场景下数据同步通常不能通过一个...
配置MySQL输入
您可以实现分库分表的场景，配置的库和表会在该任务中同时进行实时同步。重要 分库分表中的数据表的Schema请保持一致，以避免执行报错。输出字段 选择需要同步的字段，包括 管理字段 和 数据字段：管理字段：为方便进行数据管理、排序和去...
注意事项
如果数据库分片集群是分库分表模式，则所有数据库分表都需要配置分库分表规则，如果数据库分片中只有单表，分库分表规则可以直接配置 0 即可。在如下配置中，single_table 会路由到 group_00 分片：使用限制 仅支持 DML 语句（INSERT、...
数据同步模版
本文为您介绍如何使用多库多表同步或者分库分表合并模版实现数据同步。背景信息 Flink全托管支持多库多表同步和分库分表合并两种数据同步方式，二者的区别请参见下表。同步方式 详情 多库多表同步 如果您需要将一个或多个数据库中的一张或...
T+1多库合并建仓
为保证业务可以继续使用RDS数据库，业务端通常会采用分库分表技术，将一个RDS数据库中的单张表数据拆分到多个数据库的多张表中。上述方案可解决因数据量大而导致的用户体验问题，但在对分库分表数据进行大数据分析时，逻辑上的一个表被拆成...
MySQL分库分表同步至Hologres（方案2.0）
需求分析 场景描述：MySQL实例有三个分库分表数据库 order_db01、order_db02、order_db03。业务上有两种逻辑表：订单表 t_order 和用户表 t_user，其中每张逻辑表分别对应三个数据库下的两张物理表。如下图所示总共3个物理库，12张分表，...
分库分表问题
常见分库分表问题列表：分库分表是否支持多个拆分字段 分库分表是否支持跨库 JOIN 分库分表对拆分库表的数量是否有限制 分库分表是否支持多个拆分字段 数据访问代理分库分表功能支持多个拆分字段，但是如果配置了拆分字段，后续执行 SQL 均...
SQL 路由
在分库分表模式下，数据访问代理会根据拆分键（即拆分字段）以及 SQL 语义把 SQL 语句分发到底层中各个存储数据的分表进行执行。执行结束后，数据访问代理会将从各个分表获取的数据合并，然后返回给用户。本文介绍在分库分表场景中数据访问...
Sharding 功能介绍
分库分表规则 Hash 取模：将数值对分库/分表数量进行取模，得到的值作为分库位/分表位。如分表规则为 Hash 取模，分表总数为 100，值为 230，则分表位计算结果为：230%100=30。字段类型为数字。字符串截断（MySQL 风格）：将值通过 MySQL ...
UNI_HASH
使用示例 假设需要对id列按UNI_HASH函数进行分库分表，每库包含4张表，则您可以使用如下DDL语句进行建表：create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=...
UNI_HASH
使用示例 假设需要对ID列按UNI_HASH函数进行分库分表，每库包含4张表，则您可以使用如下DDL语句进行建表：create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=...
扫描全部/部分分库分表
本文介绍了扫描全部/部分分库分表的HINT语法和示例。除了可以将SQL单独下发到一个或多个分库执行，PolarDB-X 还提供了扫描全部/部分分库与分表的 SCAN HINT。使用 SCAN HINT，您可以一次将SQL下发到每一个分库执行,比如查看某个分库上的...
PolarDB-X 1.0的分库分表是什么意思？
关于 PolarDB-X 1.0 的分库分表的相关说明，请参见 拆分函数概述。
扫描全部/部分分库分表
本文介绍了扫描全部/部分分库分表的HINT语法和示例。本文适用于 PolarDB-X 1.0 5.3及以上版本，其他版本请参见 如何使用HINT（5.2及以下版本适用）。除了可以将SQL单独下发到一个或多个分库执行，PolarDB-X 1.0 还提供了扫描全部/部分分库...
逻辑库
逻辑库是由单个或多个物理库配置而成，可便捷地进行分库分表的操作。本文介绍逻辑库的定义、应用场景等信息。定义 当业务达到一定规模后，需要通过分库分表来进行负载均衡，从而达到在大量业务压力场景下具有平滑支撑的能力。当库的数量...
查看分库信息
您可以通过数据访问代理控制台查看数据库的分库分表信息以及后端各个物理分库名与所在的物理数据源（RDS 或 OceanBase）。操作步骤如下：进入数据访问代理控制台，单击左侧导航栏上的 数据库 后，可在右侧的数据库列表页面查看数据库相关...
错误代码
如果检查分库分表没有问题，请确认是否已生效了数据库配置。ERROR 7002:Unable to find table rule 问题描述：无法找到表的规则，查看用户 SQL 中的表有没有在数据访问代理控制台上配置分表规则。排查方法：检查分库分表规则，是否有配置...
YYYYWEEK
当周数经过一个循环周期后（如2012年第1周经过一个2年的循环周期后是2014年第1周），相同周数有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。使用场景 YYYYWEEK函数适用于需要按年份与一年的周数进行分库的场景。...
YYYYMM
当月份经过一个循环周期后（如2012-03经过一个2年的循环周期后是2014-03），相同月份有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。使用场景 适合于需要按年份与月份进行分库的场景，建议结合该函数与 ...
YYYYDD
当日期经过一个循环周期后（如2012-03-01经过一个2年的循环周期后是2014-03-01），同一个日期有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。使用场景 YYYYDD函数适用于需要按年份与一年的天数进行分库的场景。...
分库分表
数据拆分 数据库访问代理支持库级拆分，表级拆分和分库分表拆分，通过数据库访问代理 DDL 语句指定，具体操作参见 DDL 语法。数据访问代理根据指定拆分键的值，采用特定的算法进行计算，然后根据计算结果将数据存储到对应的分库/分表中。...
YYYYWEEK
当周数经过一个循环周期后（如2012年第1周经过一个2年的循环周期后是2014年第1周），相同周数有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本。关于实例...
YYYYMM
当月份经过一个循环周期后（如2012-03经过一个2年的循环周期后是2014-03），相同月份有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本，关于实例版本请参见 ...
YYYYDD
当日期经过一个循环周期后（如2012-03-01经过一个2年的循环周期后是2014-03-01），同一个日期有可能被路由到同一个分库分表，具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本，关于实例...
主键与唯一键（DRDS模式）
分库分表 Global主键 在分库分表中，如果主键列包含了所有拆分键，该主键就是Global主键，能保证全局唯一。示例2：分库分表中的Global主键 表user_tbl中，分库的拆分键为 id，分表的拆分键为name，主键列(id,name,addr)包含了所有拆分键，...
分布式序列问题
分库分表的分布式序列仅保证单个分片的序列 ID 唯一，如果需要确保分库分表的分布式序列全局唯一，可以在序列 ID 中拼接分库分表位，以此保证全局唯一。分布式序列使用注意事项 在运行过程中，不能调整 dbp_sequence 表的数据，如果进行了...
管理MySQL Catalog
例如，有一个分库分表的MySQL数据库，包括user01、user02和user99等多个表，分散在db01~db10等数据库中，且所有表的Schema都相互兼容，则可以通过如下正则表达式的库名表名来访问到所有user的分库分表。SELECT.FROM `db.*`.`user.*`/*+...
使用全局二级索引
索引分库分表子句：索引表的分库分表算法，与 CREATE TABLE 中分库分表子句的语法一致。示例#建表时定义 GSI CREATE TABLE t_order(`id` bigint(11)NOT NULL AUTO_INCREMENT,`order_id` varchar(20)DEFAULT NULL,`buyer_id` varchar(20)...
基本概念
数据库 database 表示数据访问代理的逻辑数据库。以这个作为访问的入口，通过分库分表、读写分离等规则可以请求到后端真实的物理数据库。数据表 data table 表示数据访问代理的逻辑表，应用访问数据访问代理时 SQL 中的表即数据表。一个...
拆分函数概述
PolarDB-X 1.0 是一个支持既分库又分表的数据库服务。本文将介绍 PolarDB-X 1.0 拆分函数的相关信息。拆分方式 在 PolarDB-X 1.0 中，一张逻辑表的拆分方式由拆分函数（包括分片数目与路由算法）与拆分键（包括拆分键的 MySQL 数据类型）...
逻辑库
为解决分库分表的场景下，查询、维护数据难的问题，DMS推出逻辑库、逻辑表的解决方案。您可以将多个（或单个）物理库配置成一个逻辑库、逻辑表，轻松查询与管理复杂、庞大的分库与分表。背景信息 分库分表场景下，业务数据按照路由算法分散...
能否更换PolarDB-X 1.0分库分表的拆分键？
若您的 PolarDB-X 1.0 实例...若您的 PolarDB-X 1.0 实例版本低于V5.4.7-16000638，不支持变更已创建完成的分库分表的拆分键。如果确实有需要变更表的拆分键，可以采用以下的临时办法：选择新的分库键并重新建表；然后将原表的数据进行导入。
逻辑表
当业务达到一定规模后，需要通过分库分表来进行负载均衡，从而达到在大量业务压力场景下具有平滑支撑的能力。本文介绍逻辑表的定义、应用场景、配置说明等信息。注意事项 逻辑表的操作必须在对应的逻辑库下进行。说明 逻辑表可当做单表直接...
应用场景
大数据存储与分析 传统的数据分析场景下，用户需要把数据从在线数据库（Operational Database）复制到离线数据仓库（Data Warehouse）上之后再进行数据分析，这需要海量数据的多次复制、传输、加载和存储等多方面工作。HybridDB for MySQL...
多主集群（库表）概述
解决方案：多主集群（库表）的秒级横向扩展和透明路由功能，结合中间件或业务分库分表可以实现透明的秒级扩展，将原来数天的扩容变为分钟级。分服游戏场景：更好的性能和扩展能力，灵活扩缩容 场景特点：在游戏成长期，数据库负载较大，且...
DDL 问题
DDL 任务创建常见问题 SQL 格式错误 SQL 语法错误 DDL 任务执行常见问题 无法获取分库分表拓扑 找不到物理数据节点 SQL 执行失败 DDL 任务创建常见问题 SQL 格式错误 错误信息：sqlContent Format error.must end with;解决方法：每条 SQL ...
选择分片数
分库分表中的分库是一个逻辑上的概念，物理上可能是一个物理数据库代表一个“分库”，也可能是多个物理数据库组成一个“分库”，在数据访问代理里面统一概念称“分片”。选择分片数原则 分片数决定了数据访问代理数据库数的逻辑最大值，...
多主集群（库表）商业化
解决方案：多主集群（库表）的秒级横向扩展和透明路由功能，结合中间件或业务分库分表可以实现透明的秒级扩展，将原来数天的扩容变为分钟级。分服游戏场景：更好的性能和扩展能力，灵活扩缩容 场景特点：在游戏成长期，数据库负载较大，且...
- 产品推荐
- 这些文档可能帮助您