分库分表问题

常见分库分表问题列表:分库分表是否支持多个拆分字段 分库分表是否支持跨库 JOIN 分库分表对拆分库表的数量是否有限制 分库分表是否支持多个拆分字段 数据访问代理分库分表功能支持多个拆分字段,但是如果配置了拆分字段,后续执行 SQL 均...

逻辑

使用场景 如下为典型的逻辑库场景:单库-分表 分库-分表 分库-不分表 注意事项 SQL Console数据查询、结构设计、数据导出、数据变更等功能支持选择物理库或者逻辑库操作。选择逻辑库,则可便捷的进行分表/逻辑表操作,即将分表/逻辑表当做...

数据库实时入仓快速入门

将tpc_ds库中所有表同步至Hologres使用CDAS(CREATE DATABASE AS)语法来实现,将user的分库分表合并同步到Hologres的单表使用CTAS(CREATE TABLE AS)语法来实现,最后再使用STATEMENT SET语法将这两条SQL语句合并在一个作业中提交。...

主键与唯一键(DRDS模式)

分库分表 Global主键 在分库分表中,如果主键列包含了所有拆分键,该主键就是Global主键,能保证全局唯一。示例2:分库分表中的Global主键 表user_tbl中,分库的拆分键为 id,分表的拆分键为name,主键列(id,name,addr)包含了所有拆分键,...

产品功能

跨数据库分布式事务 系统分库分表后,跨库事务几乎无法避免,GTS 可以让应用轻松具备跨库事务处理能力。跨服务的分布式事务 提供跨库、跨服务的事务支持,实现业务链路级别的分布式事务。消息队列分布式事务 在多次调用消息系统的场景中...

YYYYMM

当月份经过一个循环周期后(如2012-03经过一个2年的循环周期后是2014-03),相同月份有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。使用场景 适合于需要按年份与月份进行分库的场景,建议结合该函数与 ...

YYYYWEEK

当周数经过一个循环周期后(如2012年第1周经过一个2年的循环周期后是2014年第1周),相同周数有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。使用场景 YYYYWEEK函数适用于需要按年份与一年的周数进行分库的场景。...

YYYYDD

当日期经过一个循环周期后(如2012-03-01经过一个2年的循环周期后是2014-03-01),同一个日期有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。使用场景 YYYYDD函数适用于需要按年份与一年的天数进行分库的场景。...

如何使用HINT(5.2及以下版本适用)

比如有两张逻辑表,分别是t1和t2,它们都是分库分表,建表语句如下:CREATE TABLE `t1`(`id` bigint(20)NOT NULL,`name` varchar(20)NOT NULL,`val` varchar(20)DEFAULT NULL,PRIMARY KEY(`id`))ENGINE=InnoDB DEFAULT CHARSET=utf8 ...

YYYYWEEK

当周数经过一个循环周期后(如2012年第1周经过一个2年的循环周期后是2014年第1周),相同周数有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本。关于实例...

YYYYDD

当日期经过一个循环周期后(如2012-03-01经过一个2年的循环周期后是2014-03-01),同一个日期有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本,关于实例...

使用拆分字段

拆分原则 数据表拆分的首要原则,就是要尽可能找到数据表中的数据在业务逻辑上的主体,并确保大部分(或核心的)数据库操作都是围绕这个主体的数据进行,然后可使用该主体对应的字段作为拆分字段,进行分库分表。选择业务逻辑主体 业务逻辑...

变更表类型及拆分规则(DRDS模式)

分表 使用 drds_partition_options 子句进行拆分的表。drds_partition_options 可以是如下分库或分表子句:drds_partition_options:DBPARTITION BY db_partition_algorithm[TBPARTITION BY table_partition_algorithm[TBPARTITIONS ...

通过脚本模式配置离线同步任务

当您需要实现更精细化的配置管理时,您可以使用脚本模式配置离线同步任务,通过编写数据同步的JSON脚本并结合DataWorks调度参数使用,将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...

RDS MySQL/MariaDB版实例CPU使用率较高

使用阿里云PolarDB-X云原生分布式数据库,自动进行分库分表,将查询压力分担到多个RDS实例上。使用阿里云云数据库Memcache或者云数据库Redis,尽量从缓存中获取常用的查询结果,减轻RDS实例的压力。对于查询数据比较静态、查询重复度高、...

T+1多库合并建仓

为保证业务可以继续使用RDS数据库,业务端通常会采用分库分表技术,将一个RDS数据库中的单张表数据拆分到多个数据库的多张表中。上述方案可解决因数据量大而导致的用户体验问题,但在对分库分表数据进行大数据分析时,逻辑上的一个表被拆成...

指定分库执行SQL

此外如果需要单独查询某个分库或者已知分库的某个分表中的数据,也可以使用 NODE HINT,直接将SQL语句下发到分库中执行。语法 NODE HINT 支持通过分片名指定SQL在分库上执行。其中分片名是 PolarDB-X 中分库的唯一标识,可以通过 SHOW NODE...

GTS云服务下线迁移方案

返回信息中包含 8091,则可以判定已使用GTS来解决PolarDB-X(DRDS)分库分表事务。若在业务中还涉及到跨服务的分布式事务,请参考下一节中的处理方案。跨服务事务 如何判断业务侧是否使用了GTS跨服务事务场景?搜索@TxcTransaction 注解。在...

分布式序列

使用如下:SELECT order_seq.nextval FROM dual 业务序列 如前面提到的,分布式序列功能基于数据库表实现,dbp_sequence 可以部署成单库单表模式,同样也可以部署成分库分表模式,分库分表模式下有如下优点:提升 Sequence 表的读写能力。...

指定分库执行SQL

此外如果需要单独查询某个分库或者已知分库的某个分表中的数据,也可以使用 NODE HINT,直接将SQL语句下发到分库中执行。语法 NODE HINT 支持通过分片名指定SQL在分库上执行。其中分片名是 PolarDB-X 1.0 中分库的唯一标识,可以通过 SHOW ...

YYYYMM

当月份经过一个循环周期后(如2012-03经过一个2年的循环周期后是2014-03),相同月份有可能被路由到同一个分库分表,具体被分到哪个分表受实际的分表数目影响。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本,关于实例版本请参见 ...

数据访问代理连接器概述

数据访问代理连接器基于标准的 JDBC 接口...分库分表路由指定 可通过自定义 HINT 语句,指定 SQL 语句访问某一特定的分库分表。拦截器扩展 数据访问代理连接器具有灵活的扩展机制,可通过实现拦截器(Interceptor)接口,提供更多的扩展功能。

分布式序列问题

分库分表的分布式序列仅保证单个分片的序列 ID 唯一,如果需要确保分库分表的分布式序列全局唯一,可以在序列 ID 中拼接分库分表位,以此保证全局唯一。分布式序列使用注意事项 在运行过程中,不能调整 dbp_sequence 表的数据,如果进行了...

使用全局二级索引

TDDL:INDEX({table_name/table_alias},{index_name})*/示例:/*+TDDL:index(a,g_i_buyer)*/SELECT*FROM t_order a WHERE a.buyer_id=123 说明 如果查询需要使用索引中未包含的列,则首先查询索引表取得所有记录的主键和主表分库分表键,...

以及每个RDS分库里的分表数是否有限制?

单个RDS实例的默认分库数目是8个,不可更改。每个分库里的分表数目理论上是没有限制的,受限于 PolarDB-X 1.0 服务器本身的硬件资源。分表数目的选择需要依据对业务数据量的评估,详情请参见 如何选择分片数。

MySQL分库分表实践

本文为您介绍如何通过DataWorker数据集成和Flink两种方式将MySQL分库分表的数据写入至Hologres同一个表中,通过本实践您可以根据业务场景选择合适的方式将MySQL分库分表数据写入Hologres。背景信息 实际业务场景下数据同步通常不能通过一个...

存储层高可用

AnalyticDB的存储层是基于Raft协议构建了一套分布式强一致、高可用、高可靠的存储系统,相比较于传统RDBMS的主备协议、常见的分布式中间件分库分表的系统,实现了更好的读写高可用。读写高可用 AnalyticDB使用Multi-Raft方式管理数据分片,...

数据库表重命名

说明 多表聚合功能主要用于将 DRDS、MyCat 等分库分表的数据同步至目标端的同一张表。使用限制 数据传输仅支持配置数据迁移或数据同步项目时,在设置选择迁移/同步对象步骤执行重命名操作。一旦启动数据迁移或数据同步项目,请勿再执行重...

功能特性

数据访问代理兼容 MySQL 协议和语法,支持分库分表、平滑扩容、服务升降配、透明读写分离和分布式事务等特性,具备分布式数据库全生命周期的运维管控能力。分库分表 支持 RDS、OceanBase、MySQL 的分库分表。在创建分布式数据库后,只需...

Hint简介

本文介绍了自定义HINT的用途以及基本语法。本文适用于 PolarDB-X 1.0 5.3及以上版本,其他版本请参见 如何使用HINT(5.2及以下版本适用)...PolarDB-X 1.0 自定义HINT分类 读写分离 自定义SQL超时时间 指定分库执行SQL 扫描全部/部分分库分表

某互联网保险公司保险订单迁移MySQL到Lindorm

方案亮点:从MySQL上千张物理分库分表到Lindorm单表;Lindorm完全线性扩展能力从容应对业务量&数据量的快速增长;Lindorm原生存储计算分离架构从容应对大促的弹性扩缩容需求。业务挑战 保单MySQL库业务增速快,需要不断分库分表,运维压力...

RIGHT_SHIFT

描述 根据分库键的键值(键值必须是整数)有符号地向右移二进制指定的位数(位数可通过DDL指定),然后将得到的整数值按分库(表)数目取余。使用限制 拆分键的类型必须整数类型。使用场景 当拆分键大部分键值的低位部分区分度比较低而高位...

RIGHT_SHIFT

路由方式 根据分库键的键值(键值必须是整数)有符号地向右移二进制指定的位数(位数可通过DDL指定),然后将得到的整数值按分库(表)数目取余。说明 移位的数目不能超过整数类型所占有的位数目。使用场景 当拆分键的大部分的键值的低位...

分库分表

数据拆分 数据库访问代理支持库级拆分,表级拆分和分库分表拆分,通过数据库访问代理 DDL 语句指定,具体操作参见 DDL 语法。数据访问代理根据指定拆分键的值,采用特定的算法进行计算,然后根据计算结果将数据存储到对应的分库/分表中。...

V5.1.x系列实例版本说明

修复建分库分表时,若同时存在分库分表字段,且分库分表字段一个带英文反引号(`),一个不带,SQL解析列名错误的问题。修复SQL中存在大量OR条件时内存占用过多的问题。修复当SQL中GROUPBY、DISTINCT、AGGREGATE和LIMIT混用时结果错误的...

源为PolarDB-X的功能规范和约束说明

运维变更规范 变更类型 具体变更 影响及应对规范 PolarDB分布式版 方面 分库分表变化(如变更分库分表键、或变更分库分表数量)场景。暂不支持,需按如下步骤重新创建任务:停止并删除原先的DTS任务。待源库变更完成后,清空目标库已经同步...

源为PolarDB-X的功能规范和约束说明

运维变更规范 变更类型 具体变更 影响及应对规范 PolarDB分布式版 方面 分库分表变化(如变更分库分表键、或变更分库分表数量)场景。暂不支持,需按如下步骤重新创建任务:停止并删除原先的DTS任务。待源库变更完成后,清空目标库已经同步...

聚合支付:Ping+

通过 PolarDB-X 分库分表,将数据库水平拆分有效解决了支付订单的存储瓶颈及高并发压力。使用 PolarDB-X 升配及平滑扩容满足了业务高速发展过程中 PolarDB-X 数据库平滑扩展的诉求。业务架构 建议及诉求 因存在历史数据,期望可以将几年前...

切分键使用不当导致同步的数据和原表数据条数不

解决方案 切分键作用:配合并发度使用,一般建议使用主键或有索引的列作为切分键。并发线程中切分键字段值一样,会判断为同一条数据。以上问题首先确认切分键是否主键或者切分键的值是否唯一;其次考虑切分键的数据类型是否为字符串,字符...

版本发布说明

AUTO模式数据分区表新增支持使用指定小数精度为0的Decimal类型作为分区列。缺陷修复 修复Error Code输出格式不规范的问题。修复information_schema.plan_cache视图返回重复值且不能显示缓存参数的问题。修复建表时包含encryption关键字...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
阿里邮箱 数据库备份 DBS 云数据库 Redis 版 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用