数据库实时入仓快速入门
表结构 users表的表结构比MySQL源表中多了_db_name和_table_name两列，代表数据来源的库名和表名，且作为联合主键的一部分来保证分库分表合并后的数据唯一性。表数据 在users表信息页面右上角，单击 查询表 后，输入如下命令，单击 运行。...
HASH
描述 若分库和分表使用不同拆分键进行HASH时，则根据分库键的键值直接按分库数取余。如果键值是字符串，则字符串会先被换算成哈希值再进行路由计算。例如HASH(8)等价于8%D（D是分库数目）,而HASH("ABC")等价于hashcode("ABC").abs()%D（D是...
HASH
路由方式 若分库和分表使用不同拆分键进行HASH时，则根据分库键的键值直接按分库数取余。如果键值是字符串，则字符串会先被换算成哈希值再进行路由计算。例如 HASH(8)等价于 8%D（D是分库数目）,而 HASH("ABC")等价于 hashcode("ABC").abs...
拆分函数概述
拆分函数对分库、分表的支持情况 拆分函数 说明 是否支持用于分库 是否支持用于分表 HASH 简单取模 是 是 STR_HASH 截取字符串子串 是 是 UNI_HASH 简单取模 是 是 RIGHT_SHIFT 数值向右移 是 是 RANGE_HASH 双拆分列哈希 是 是 MM 按月份...
Sharding 功能介绍
使用 Sharding 语句中的 dbshard 子句，参数 shards 的值是分库数的整数倍时，创建出来的分表通过 show topology from 命令查询出来的信息和在物理库中的展示信息不统一：在物理库中的展示信息是分库分表；在 server 中通过命令查询出来的...
STR_HASH
valType 表示截取后的子串在计算分库分表时所使用的类型，取值范围如下：0（默认值）：表示 PolarDB-X 将截取后的子串当作字符串类型来计算路由。1：表示 PolarDB-X 将截取后的子串当作整数类型来计算路由（子串面值的整数不能大于...
基本概念
以这个作为访问的入口，通过分库分表、读写分离等规则可以请求到后端真实的物理数据库。数据表 data table 表示数据访问代理的逻辑表，应用访问数据访问代理时 SQL 中的表即数据表。一个逻辑表会对应多个物理表，数据访问代理在路由时，会...
逻辑库
定义 当业务达到一定规模后，需要通过分库分表来进行负载均衡，从而达到在大量业务压力场景下具有平滑支撑的能力。当库的数量大于或等于1，有如下限制：库数量 说明 大于1 大于1时，库名个数、后缀格式需要有约束。一般个数为2的指数幂。...
STR_HASH
valType 表示截取后的子串在计算分库分表时所使用的类型，取值范围如下：0（默认值）：表示 PolarDB-X 1.0 将截取后的子串当作字符串类型来计算路由。1：表示 PolarDB-X 1.0 将截取后的子串当作整数类型来计算路由（子串面值的整数不能大于...
MM
描述 根据分库键时间值的月份数进行取余运算并得到分表下标。使用限制 拆分键的类型必须是DATE、DATETIME或TIMESTAMP中的一种。只能作为分表函数使用，不能作为分库函数使用。按MM进行分表，由于一年的月份只有12个月，所以各分库的分表数...
逻辑库
为解决分库分表的场景下，查询、维护数据难的问题，DMS推出逻辑库、逻辑表的解决方案。您可以将多个（或单个）物理库配置成一个逻辑库、逻辑表，轻松查询与管理复杂、庞大的分库与分表。背景信息 分库分表场景下，业务数据按照路由算法分散...
DD
描述 根据分库键时间值日期的天数进行取余运算并得到分表下标。使用限制 拆分键的类型必须是DATE、DATETIME或TIMESTAMP中的一种。只能作为分表函数使用，不能作为分库函数使用。按DD进行分表，由于一个月中日期（DATE_OF_MONTH）的取值范围...
逻辑表
当业务达到一定规模后，需要通过分库分表来进行负载均衡，从而达到在大量业务压力场景下具有平滑支撑的能力。本文介绍逻辑表的定义、应用场景、配置说明等信息。注意事项 逻辑表的操作必须在对应的逻辑库下进行。说明 逻辑表可当做单表直接...
MM
按MM进行分表，由于一年的月份只有12个月，所以各分库的分表数不能超过12。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本，关于实例版本请参见 版本说明。路由方式 根据分库键时间值的月份数进行取余运算并得到分表下标。使用场景...
MMDD
描述 根据分库键时间值在一年中所对应的日期进行取余运算并得到分表下标。使用限制 拆分键的类型必须是DATE、DATETIME或TIMESTAMP中的一种。只能作为分表函数使用，但不能作为分库函数。按MMDD进行分表，由于一年最多只有366天，所以各个分...
WEEK
描述 根据分库键的时间值所对应的一周之中的日期进行取余运算并得到分表下标。使用限制 拆分键的类型必须是DATE、DATETIME或TIMESTAMP中的一种。只能作为分表函数使用，但不能作为分库函数。使用场景 WEEK适用于按周数的日期进行分表，分表...
DD
按DD进行分表，由于一个月中日期（DATE_OF_MONTH）的取值范围是1~31，所以各分库的分表数不能超过31。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本，关于实例版本请参见 版本说明。路由方式 根据分库键时间值日期的天数进行取余...
WEEK
按WEEK进行分表，由于一周共有7天，所以各分库的分表数不能超过7。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本，关于实例版本请参见 版本说明。路由方式 根据分库键时间值所对应的一周之中的日期进行取余运算并得到分表下标。...
MMDD
按MMDD进行分表，由于一年最多只有366天，所以各个分库的分表数目不能超过366。PolarDB-X 1.0 实例的版本需为5.1.28-1320920或以上版本，关于实例版本请参见 版本说明。路由方式 根据分库键时间值在一年中所对应的日期进行取余运算并得到...
使用全局二级索引
TDDL:INDEX({table_name/table_alias},{index_name})*/示例：/*+TDDL:index(a,g_i_buyer)*/SELECT*FROM t_order a WHERE a.buyer_id=123 说明 如果查询需要使用索引中未包含的列，则首先查询索引表取得所有记录的主键和主表分库分表键，...
使用拆分字段
如果确实找不到合适的业务逻辑主体作为拆分字段，那么可以考虑下面的方法来选择拆分字段：根据数据分布和访问的均衡度来考虑拆分字段，尽量将数据表中的数据相对均匀地分布在不同的物理分库/分表中，适用于大量分析型查询的应用场景（查询...
扩展性原理
并发和存储容量扩展性 扩展性本质在于分而治之，PolarDB-X 1.0 计算资源通过 水平拆分（分库分表）和 垂直拆分，将数据分散到多个存储资源MySQL以实现获取数据读写并发和存储容量分散的效果。水平拆分（分库分表）您可以通过一定的计算或...
SELECT 语法
普通查询 分库分表查询条件要带上拆分键，否则要使用 HINT 指定分库分表或全表扫描。带拆分键查询仅支持=和 in，不支持范围查询。LIMIT 若有两个参数，第一个参数表示返回第一行的偏移量，第二个参数表示返回的行数。若仅有一个参数，则...
SQL 路由
在分库分表模式下，数据访问代理会根据拆分键（即拆分字段）以及 SQL 语义把 SQL 语句分发到底层中各个存储数据的分表进行执行。执行结束后，数据访问代理会将从各个分表获取的数据合并，然后返回给用户。本文介绍在分库分表场景中数据访问...
AUTO模式数据库与DRDS模式数据库
分库分表语句：dbpartition by hash(id)tbpartition by hash(id)tbpartition 2 表数据总量：16000W 测试场景 Sysbench细分场景说明：oltp_point_select：仅含分区键的单点等值查询。oltp_read_only：事务中同时混合分区键的单点查询与小...
自定义 HINT
自定义路由 HINT 分库分表场景下使用数据访问代理时，每一个 SQL 请求语句中都需要存在分库分表字段。在无法获得分库分表字段场景下，如果需要请求指定数据分片、分表执行 SQL 语句时，可以通过自定义路由 HINT 实现。自定义路由 HINT 基本...
应用场景
交易支付透明拆分 交易支付是蚂蚁集团最核心的一个业务，最初采用的是分库分表的解决方案。分库分表的方案给核心业务带来了水平扩展的能力，同时也带来了灰度升级的能力，让核心业务的系统性风险大大降低。但随着支付宝业务的飞速发展，...
如何使用全局二级索引
TDDL:INDEX({table_name/table_alias},{index_name})*/示例：/*+TDDL:index(a,g_i_buyer)*/SELECT*FROM t_order a WHERE a.buyer_id=123 说明 如果查询需要使用索引中未包含的列，则首先查询索引表取得所有记录的主键和主表分库分表键，...
方案选择
传统方案一：MySQL分库分表 MySQL自身拥有强大的数据查询、分析功能，基于MySQL创建订单系统，可以应对订单数据多维查询和统计场景。伴随着订单数据量的增加，采取分库分表方案应对，通过这种伪分布式方案解决数据膨胀带来的问题。但数据...
如何选择拆分键
背景信息 拆分键即分库或分表字段，是水平拆分过程中用于生成拆分规则的数据表字段。PolarDB-X 1.0 将拆分键值通过拆分函数计算得到一个计算结果，然后根据这个结果将数据分拆到 私有定制RDS 实例上。数据表拆分的首要原则是尽可能找到数据...
管理MySQL Catalog
例如，有一个分库分表的MySQL数据库，包括user01、user02和user99等多个表，分散在db01~db10等数据库中，且所有表的Schema都相互兼容，则可以通过如下正则表达式的库名表名来访问到所有user的分库分表。SELECT.FROM `db.*`.`user.*`/*+...
MySQL分库分表同步至MaxCompute
本文以MySQL分库分表实时写入MaxCompute场景为例，为您介绍如何通过数据集成同步分库分表数据至MaxCompute。前提条件 已完成MaxCompute和MySQL数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来...
MySQL分库分表同步至MaxCompute
本文以MySQL分库分表实时写入MaxCompute场景为例，为您介绍如何通过数据集成同步分库分表数据至MaxCompute。前提条件 已完成MaxCompute和MySQL数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来...
DDL 问题
DDL 任务创建常见问题 SQL 格式错误 SQL 语法错误 DDL 任务执行常见问题 无法获取分库分表拓扑 找不到物理数据节点 SQL 执行失败 DDL 任务创建常见问题 SQL 格式错误 错误信息：sqlContent Format error.must end with;解决方法：每条 SQL ...
数据表管理
当一张逻辑表的分库拆分方式与分表拆分方式不一致时，若SQL查询没有同时带上分库条件与分表条件，则 PolarDB-X 1.0 在查询过程会进行全分库扫描或全分表扫描操作。关闭全表扫描 PolarDB-X 1.0 默认为新创建的表开启全表扫描功能，但频繁...
如何选择分片数
示例 假设预估一张表在2年后的总数据量约为1亿行，您已购买了4个 私有定制RDS 实例，那么按照分片数公式进行如下计算：物理分库上的物理分表数=CEILING(100,000,000/(4*8)/5,000,000)=CEILING(0.625)=1 结果为1，那么您只需要分库而无需...
数据访问代理连接器概述
数据访问代理连接器基于标准的 JDBC 接口...分库分表路由指定 可通过自定义 HINT 语句，指定 SQL 语句访问某一特定的分库分表。拦截器扩展 数据访问代理连接器具有灵活的扩展机制，可通过实现拦截器(Interceptor)接口，提供更多的扩展功能。
创建数据访问代理数据表
对于设置为“分库分表”模式的数据访问代理数据库来说，在创建数据表时需要制定其相应的分表规则，之后应用通过连接数据访问代理可以透明访问后端的数据表，由数据访问代理根据设定的分表规则进行路由操作。操作步骤 在数据访问代理控制台...
锁诊断
取消查询 查询所属的会话必须在运行中状态才能取消该查询，取消查询后数据库需要花费一定的时间来做清理和事务的回滚。取消查询语句如下：SELECT pg_cancel_backend(<进程ID>);如果会话已经处于空闲（Idle）状态，则需要使用结束查询的方法...
全局二级索引
说明 创建GSI时需要注意选择与主表不同的分库分表键，详情请参见 使用全局二级索引。Q：全局二级索引和局部索引有什么关系？A：全局二级索引和局部索引间的关系如下所示：全局二级索引：不同于局部索引，如果数据行和对应的索引行保存在...
- 产品推荐
- 这些文档可能帮助您