场景:配置分库分表离线同步任务

说明 仅MySQL、PolarDB、AnalyticDB支持通过向导模式添加分库分表,其他数据库请切换至脚本模式配置分库分表同步。脚本模式配置分库分表:脚本示例如下,完整的任务配置步骤请参见 通过脚本模式配置离线同步任务。重要 实际运行时,请删除...

Sharding 功能介绍

Sharding 语法使用限制 下面简单介绍 Sharding 语句的通用语法,以及 Sharding 语句在单库单表和分库分表等不同情况下的使用限制。语法 CREATE[TEMPORARY]TABLE tbl_name[(create_definition,.)][table_options][dbshard by hash([id,str...

UNI_HASH

使用示例 假设需要对id列按UNI_HASH函数进行分库分表,每库包含4张表,则您可以使用如下DDL语句进行建表:create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=...

UNI_HASH

使用示例 假设需要对ID列按UNI_HASH函数进行分库分表,每库包含4张表,则您可以使用如下DDL语句进行建表:create table test_hash_tb(id int,name varchar(30)DEFAULT NULL,create_time datetime DEFAULT NULL,primary key(id))ENGINE=...

扫描全部/部分分库分表

本文介绍了扫描全部/部分分库分表的HINT语法示例。除了可以将SQL单独下发到一个或多个分库执行,PolarDB-X 还提供了扫描全部/部分分库与分表的 SCAN HINT。使用 SCAN HINT,您可以一次将SQL下发到每一个分库执行,比如查看某个分库上的...

扫描全部/部分分库分表

本文介绍了扫描全部/部分分库分表的HINT语法示例。本文适用于 PolarDB-X 1.0 5.3及以上版本,其他版本请参见 如何使用HINT(5.2及以下版本适用)。除了可以将SQL单独下发到一个或多个分库执行,PolarDB-X 1.0 还提供了扫描全部/部分分库...

如何选择片数

若您在 创建数据库 时,选择拆分模式为 水平拆分,则 PolarDB-X 1.0 为默认为每个 私有定制RDS 实例创建8个物理分库,每个物理分库上可以创建一个或多个物理分表,而分表数通常也被称为分片数。计算公式 一般情况下,建议单个物理分表的总...

数据同步模版

分库分表合并 当同一份业务数据分散在不同的数据库或者业务表时,我们往往需要用到分库分表合并的能力,将表结构相似的分库分表的数据同步到一张目标表中。Flink CDC可以自动同步源中所有分库分表的全量增量数据(包括新增的符合正则表达...

分库分表

数据拆分 数据库访问代理支持库级拆分,表级拆分和分库分表拆分,通过数据库访问代理 DDL 语句指定,具体操作参见 DDL 语法。数据访问代理根据指定拆分键的值,采用特定的算法进行计算,然后根据计算结果将数据存储到对应的分库/分表中。...

HASH

描述 若分库和分表使用不同拆分键进行HASH时,则根据分库键的键值直接按分库数取余。如果键值是字符串,则字符串会先被换算成哈希值再进行路由计算。例如HASH(8)等价于8%D(D是分库数目),而HASH("ABC")等价于hashcode("ABC").abs()%D(D是...

HASH

路由方式 若分库和分表使用不同拆分键进行HASH时,则根据分库键的键值直接按分库数取余。如果键值是字符串,则字符串会先被换算成哈希值再进行路由计算。例如 HASH(8)等价于 8%D(D是分库数目),而 HASH("ABC")等价于 hashcode("ABC").abs...

应用场景

在基于 MySQL 数据库的系统架构下,存放着设备信息的库表,往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度,也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...

数据表管理

使用限制 如果分库或者分表拆分函数使用了YYYYMM/YYYYWEEK/YYYYDD时,分库和分表函数需要相同。暂不支持STR_HASH拆分。MM/DD/WEEK/MMDD只支持作为表级别的拆分函数。操作步骤 在数据表配置页面,找到目标数据表,单击右侧 操作 栏中的 调整...

注意事项

如果数据库分片集群是分库分表模式,则所有数据库分表都需要配置分库分表规则,如果数据库分片中只有单表,分库分表规则可以直接配置 0 即可。在如下配置中,single_table 会路由到 group_00 分片:使用限制 仅支持 DML 语句(INSERT、...

使用拆分字段

拆分原则 数据表拆分的首要原则,就是要尽可能找到数据表中的数据在业务逻辑上的主体,并确保大部分(或核心的)数据库操作都是围绕这个主体的数据进行,然后可使用该主体对应的字段作为拆分字段,进行分库分表。选择业务逻辑主体 业务逻辑...

如何使用HINT(5.2及以下版本适用)

比如有两张逻辑表,分别是t1t2,它们都是分库分表,建表语句如下:CREATE TABLE `t1`(`id` bigint(20)NOT NULL,`name` varchar(20)NOT NULL,`val` varchar(20)DEFAULT NULL,PRIMARY KEY(`id`))ENGINE=InnoDB DEFAULT CHARSET=utf8 ...

CREATE TABLE

drds_partition_options:索引表的分库分表子句,详情请参见 分库分表子句参数。index_option:索引表中分库分表键上局部索引的属性,详情请参见 MySQL 文档。全链路压测影子表子句 SHADOW:创建全链路压测影子表,表名必须以_test_为...

MySQL数据

此处的‘分库分表’是指多个MySQL写入同一个目标表,如想要支持整库级别配置分库分表,还请在 数据集成站点建立任务 并选择整库分库分表能力 {"type":"job","version":"2.0","steps":[{"stepType":"mysql","parameter":{"indexes":[{"type...

CREATE TABLE(DRDS模式)

drds_partition_options:索引表的分库分表子句,详情请参见 分库分表子句参数。index_option:索引表中分库分表键上局部索引的属性,详情请参见 MySQL 文档。全链路压测影子表子句 SHADOW:创建全链路压测影子表,表名必须以_test_为...

如何选择拆分键

背景信息 拆分键即分库分表字段,是水平拆分过程中用于生成拆分规则的数据表字段。PolarDB-X 1.0 将拆分键值通过拆分函数计算得到一个计算结果,然后根据这个结果将数据分拆到 私有定制RDS 实例上。数据表拆分的首要原则是尽可能找到数据...

中间件ShardingSphere开发指南

背景信息 ShardingSphere适合分片彻底、数据库逻辑分片极其清晰的业务,支持如下功能:数据分片 分库和分表 读写分离 分片策略定制化 无中心化分布式主键 分布式事务 标准化事务接口 XA强一致事务 柔性事务 数据库治理 配置动态化 编排...

规则拓扑查询语句

TEST_WNJG_0007_RDS|emp_1|+-+-+-+SHOW PARTITIONS FROM tablename 查看分库分表键集合,分库键分表键之间用逗号分割。如果最终结果有两个值,说明是既分库又分表的情形,第一个是分库键,第二个是分表键。如果结果只有一个值,说明是分...

规则拓扑查询语句

TEST_WNJG_0007_RDS|emp_1|+-+-+-+16 rows in set(0.01 sec)SHOW PARTITIONS FROM tablename 查看分库分表键集合,分库键分表键之间用逗号分割。如果最终结果有两个值,说明是既分库又分表的情形,第一个是分库键,第二个是分表键。如果...

PolarDB-X 1.0的分库分表是什么意思?

关于 PolarDB-X 1.0 的分库分表的相关说明,请参见 拆分函数概述。

拆分函数概述

PolarDB-X 1.0 是一个支持既分库分表数据库服务。本文将介绍 PolarDB-X 1.0 拆分函数的相关信息。拆分方式 在 PolarDB-X 1.0 中,一张逻辑表的拆分方式由拆分函数(包括分片数目与路由算法)与拆分键(包括拆分键的 MySQL 数据类型)...

扩展性原理

并发和存储容量扩展性 扩展性本质在于分而治之,PolarDB-X 1.0 计算资源通过 水平拆分(分库分表 垂直拆分,将数据分散到多个存储资源MySQL以实现获取数据读写并发和存储容量分散的效果。水平拆分(分库分表)您可以通过一定的计算或...

逻辑

逻辑库是由单个或多个物理库配置而成,可便捷地进行分库分表的操作。本文介绍逻辑库的定义、应用场景等信息。定义 当业务达到一定规模后,需要通过分库分表来进行负载均衡,从而达到在大量业务压力场景下具有平滑支撑的能力。当库的数量...

查看分库信息

您可以通过数据访问代理控制台查看数据库分库分表信息以及后端各个物理分库名与所在的物理数据源(RDS 或 OceanBase)。操作步骤如下:进入数据访问代理控制台,单击左侧导航栏上的 数据库 后,可在右侧的数据库列表页面查看数据库相关...

YYYYWEEK

当周数经过一个循环周期后(如2012年第1周经过一个2年的循环周期后是2014年第1周),相同周数有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。使用场景 YYYYWEEK函数适用于需要按年份与一年的周数进行分库的场景。...

YYYYMM

当月份经过一个循环周期后(如2012-03经过一个2年的循环周期后是2014-03),相同月份有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。使用场景 适合于需要按年份与月份进行分库的场景,建议结合该函数与 ...

YYYYDD

当日期经过一个循环周期后(如2012-03-01经过一个2年的循环周期后是2014-03-01),同一个日期有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。使用场景 YYYYDD函数适用于需要按年份与一年的天数进行分库的场景。...

YYYYWEEK

当周数经过一个循环周期后(如2012年第1周经过一个2年的循环周期后是2014年第1周),相同周数有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本。关于实例...

YYYYMM

当月份经过一个循环周期后(如2012-03经过一个2年的循环周期后是2014-03),相同月份有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本,关于实例版本请参见 ...

数据访问代理连接器概述

数据访问代理连接器基于标准的 JDBC 接口...分库分表路由指定 可通过自定义 HINT 语句,指定 SQL 语句访问某一特定的分库分表。拦截器扩展 数据访问代理连接器具有灵活的扩展机制,可通过实现拦截器(Interceptor)接口,提供更多的扩展功能。

YYYYDD

当日期经过一个循环周期后(如2012-03-01经过一个2年的循环周期后是2014-03-01),同一个日期有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本,关于实例...

分布式序列问题

分库分表的分布式序列仅保证单个分片的序列 ID 唯一,如果需要确保分库分表的分布式序列全局唯一,可以在序列 ID 中拼接分库分表位,以此保证全局唯一。分布式序列使用注意事项 在运行过程中,不能调整 dbp_sequence 表的数据,如果进行了...

使用说明

本文介绍如何使用数据访问代理连接器来进行 SQL 链路追踪、指定分库分表路由拦截器扩展。SQL 链路追踪 使用以下 HINT 语句,根据 traceId RpcId 对 SQL 数据库进行追踪:/*+DBP:$SYS={TRACE(TraceId#RpcId)}*/select*from{table_name}...

逻辑

为解决分库分表的场景下,查询、维护数据难的问题,DMS推出逻辑库、逻辑表的解决方案。您可以将多个(或单个)物理库配置成一个逻辑库、逻辑表,轻松查询与管理复杂、庞大的分库与分表。背景信息 分库分表场景下,业务数据按照路由算法分散...

能否更换PolarDB-X 1.0分库分表的拆分键?

若您的 PolarDB-X 1.0 实例...若您的 PolarDB-X 1.0 实例版本低于V5.4.7-16000638,不支持变更已创建完成的分库分表的拆分键。如果确实有需要变更表的拆分键,可以采用以下的临时办法:选择新的分库键并重新建表;然后将原表的数据进行导入。

逻辑表

当业务达到一定规模后,需要通过分库分表来进行负载均衡,从而达到在大量业务压力场景下具有平滑支撑的能力。本文介绍逻辑表的定义、应用场景、配置说明等信息。注意事项 逻辑表的操作必须在对应的逻辑库下进行。说明 逻辑表可当做单表直接...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 MongoDB 版 数据库备份 DBS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用