Tunnel操作
分区表一定要指定上传的分区，多级分区一定要指定到末级分区。命令格式 Tunnel upload[<project_name>.][/];参数说明 path：必填。上传数据文件的存放路径以及文件名称。默认上传的数据文件为TXT格式。数据文件的归档路径有两种选择：您...
截断分区
与截断表的操作类似，PolarDB PostgreSQL版（兼容Oracle）可以指定一个分区进行截断。本文介绍了其语法及示例。语法说明 ALTER TABLE<table_name>TRUNCATE PARTITION；ALTER TABLE<table_name>TRUNCATE SUBPARTITION;使用以上 TRUNCATE ...
表设计
说明 有一种局部热点情况，假设10.10.0.0/16这个网段的机器写入量很大，而表格存储是按照分区键的一个范围进行分区的，刚好这些机器又都分在一个分区内，会不会产生热点呢？如果写入压力超过或接近单分区的上限，确实是一个热点，但是表格...
热点散列
对于Range和List分区，分区数据是按照用户的定义来划分的，对于HASH策略的分区，PolarDB-X采用的是一致性HASH算法，将分区键的值映射为一个具体的哈希值，进而映射到分区所在的哈希空间。对分区键分布均衡（例如分区键是主键），且采用的是...
并行查询
分区间并行 分区间并行是指每个worker查询一个分区，从而实现多个worker并行查询整个分区表。示例：EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:6->Parallel Append->Seq Scan on prt1_p5->Seq Scan on prt1_...
并行查询
分区间并行 分区间并行是指每个worker查询一个分区，从而实现多个worker并行查询整个分区表。示例：EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:6->Parallel Append->Seq Scan on prt1_p5->Seq Scan on prt1_...
并行查询
分区间并行 分区间并行是指每个worker查询一个分区，从而实现多个worker并行查询整个分区表。示例：EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:6->Parallel Append->Seq Scan on prt1_p5->Seq Scan on prt1_...
AddPartitions
调用AddPartitions在元信息系统中添加分区信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String ...
Linux自定义镜像如何适配NVMe系统盘？
vi/etc/default/grub 按 i 键进入编辑模式，在 GRUB_CMDLINE_LINUX=一行中，添加 nvme_core.io_timeout=4294967295 nvme_core.admin_timeout=4294967295 参数信息。添加参数后，文件内容如下图所示：说明 如果配置文件中默认已存在相同的...
MAX_PT
返回分区表的一级分区中有数据的分区的最大值，按字母排序，且读取该分区下对应的数据。注意事项 max_pt 函数也可以使用标准SQL实现，select*from table where pt=max_pt("table");可以改写为 select*from table where pt=(select max(pt)...
ODPS-0123031
2）您可以合并历史分区数据，例如把历史一个的数据合并成一个分区，详情可以参考 合并分区。3）您可以通过拆表，把历史分区数据备份到备份表，把历史分区从当前表删除，请参考 删除分区。错误2：a single instance cannot output data to ...
REPLACE 语句
标准语法 REPLACE[INTO]table_name(column_name[,.])VALUES(replace_expr_list)[,(replace_expr_list)[,.]]限制说明 当前不支持分布式事务，如果一次 replace 多个行，且这些行不在同一个分区，那么数据库会开启一个不完整的分布式事务，在...
费用优化
优化配置 配置可以从以下两个方面进行优化：分区个数 一个分区最大可以处理5M/s的数据。只有readwrite的分区会收费。请调整分区个数，使其正好能处理5M/s的数据。减少分区个数请合并分区。Logstore 数据保存周期 针对您对日志的查询、存储...
管理分区计划
背景信息 分区计划是专门针对 Range 分区的扩展功能，ODC 支持依据用户设置的分区策略对 Range 分区表进行自动管理，用户无需手动创建新分区，以方便维护 Range 分区表。Range 分区：Range 分区是最常见的分区类型，通常与日期一起使用。在...
ALTER MATERIALIZED VIEW
背景信息 更新物化视图的命令包括：更新物化视图 修改物化视图的生命周期 开启或禁用物化视图的生命周期 删除物化视图分区 更新物化视图 当物化视图的数据对应的表或分区产生插入、覆写、更新、删除等操作时，物化视图会自动失效，无法用于...
宽表模型介绍
表格存储 按照分区键对数据表的数据进行分区，具有相同分区键的行会被划分到同一个分区，实现数据访问负载均衡。属性列（Attribute Column）一行中除主键列外，其余都是属性列。属性列会对应多个值，不同值对应不同的版本，每行的属性列...
CREATE TABLE（AUTO模式）
Hash分区与Key分区是 原生MySQL的标准分区语法 之一，PolarDB-X 为提供灵活强大的分区管理能力（例如分裂、合并与迁移等）以及考虑支持向量分区键下热点散裂，PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...
何时选择LIST分区
以下示例为北京、天津、内蒙、河北的所有客户存储在一个分区中，其他省市的客户存储在不同的分区中。按区域分析账户的管理人员可以利用分区剪枝。区域 编号 华北（p_cn_north）1:BJ,2:TJ,3:HB,4:NM 华南（p_cn_south）5:GD,6:GX,7:HN 华东...
分区策略使用示例
设置 OceanBase MySQL 类型的表分区策略 示例：在数据源 mysql424 下数据库 test_424 中，对 order 表设置创建分区策略和删除分区策略。信息项 示例值 项目名称 odc_4.2.0 所属数据源 mysql424 数据库名称 test_424 表名称 order 在 SQL ...
ALTER PARTITION TABLE
如果您添加了一个不接受NULL值的列表分区，除非它是一个表达式，否则您需要添加NOT NULL约束至分区键列。DETACH PARTITION partition_name 分离目标表的指定分区。被分离的分区作为独立表继续存在，但不再与目标表相关联。使用限制 分区子...
迁移数据上云
在同一个分区中的数据迁移后并不保证依旧在同一个分区中。默认情况下，Key相同的消息会分布在同一分区中。普通消息在宕机时可能会乱序，分区顺序消息在宕机时依然保持顺序。VPC接入 配置 consumer.properties。自建Kafka集群的接入点 ...
如何快速测试云消息队列 Kafka 版服务端是否正常？
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
INSERT 语句
当前不支持分布式事务，如果一次 insert 多个行，且这些行不在同一个分区，那么数据库会开启一个不完整的分布式事务，在部分分区提交成功部分分区提交失败时，可能导致回滚不一致，用户应慎用或不用。若用户的表包含自增主键，则 insert 时...
表操作篇
设计良好的主键 表格存储会根据表的分区键将表的数据自动切分成多个分区，每个分区调度到一台服务节点上。分区键的值是最小的分区单位，相同的分区键值下的数据无法再做切分。为了防止某一个分区键值的数据成为访问热点造成单机服务能力...
写数据表
一、组件说明 写数据组件。需要用来输出的数据表，必须先加入到项目数据中。组件截图 二、参数说明 参数名称 参数...分区 DataTrust允许多分区表的输入和输出，可根据需求添加所需分区。可不填。选择输出字段 根据建模需要选择结果输出字段。
顺序消息
说明 全局顺序消息实际上是一种特殊的分区顺序消息，即Topic中只有一个分区，因此全局顺序和分区顺序的实现原理相同。因为分区顺序消息有多个分区，所以分区顺序消息比全局顺序消息的并发度和性能更高。如何实现顺序消息 全局顺序消息和...
AUTO模式核心特性及典型场景
热点分裂——有效解决数据热点 对于热点数据，PolarDB-X 支持两种处理方式：第一种方案是将热点数据所在的分区数据迁移到特定的数据节点，让热点数据以独享存储资源的方式服务业务，能够实现热点数据不影响非热点数据的业务。具体操作步骤...
安装软件包
当您添加Linux软件源并知晓目标软件包名称之后，您可以使用Linux系统提供的软件包管理工具，安装所需要的软件包。本文以在CentOS、Debian、Ubuntu和OpenSUSE操作系统上安装阿里云软件源中的Apache软件包为例，为您介绍如何在不同Linux发行...
EMR控制台管理YARN分区
EMR支持在控制台上通过可视化UI管理YARN分区，同时可以批量建立节点组与分区的映射，方便操作。您可以直接在节点组上配置分区属性，扩容和弹性伸缩后，EMR会自动为新增节点打上Node Label，无需重新配置新节点。本文为您介绍如何在EMR控制...
OPT_PARAM Hints
enable_partition_pruning 允许或禁止查询规划器从查询计划中消除一个分区表的分区。同时也控制着规划器产生允许执行器在查询执行期间移除（忽略）分区的查询计划的能力。enable_partitionwise_aggregate 允许或禁止查询规划器使用面向分区...
OPT_PARAM Hints
enable_partition_pruning 允许或禁止查询规划器从查询计划中消除一个分区表的分区。同时也控制着规划器产生允许执行器在查询执行期间移除（忽略）分区的查询计划的能力。enable_partitionwise_aggregate 允许或禁止查询规划器使用面向分区...
作为Output接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
局部事务
使用局部事务功能，创建数据范围在一个分区键值内的局部事务。对局部事务中的数据进行读写操作后，可以根据实际提交或者丢弃局部事务。局部事务通过悲观锁（Pessimistic Lock）实现并发控制。目前局部事务功能处于邀测中，默认关闭。如果...
作为Output接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
出错提示S6磁盘分区创建快照出错
其中S6_*可能的错误码如下：S6_8 S6_1 问题原因 块复制迁移过程中，SMC客户端会在源系统内部自动创建磁盘分区快照设备，用于数据同步。源系统SMC客户端进行磁盘分区创建快照时出错，可能原因如下：Windows：磁盘分区空间不足。系统安装有...
计划加速
例如，一个分区表有两级分区，一级分区按照哈希分区，有100个分区；二级分区按照哈希分区，每个二级分区再次分成100个子分区。此时整个分区表共有10000个分区。此时如果对这个分区表进行查询，查询计划如下：explain analyze select*from ...
计划加速
例如，一个分区表有两级分区，一级分区按照哈希分区，有100个分区；二级分区按照哈希分区，每个二级分区再次分成100个子分区。此时整个分区表共有10000个分区。此时如果对这个分区表进行查询，查询计划如下：explain analyze select*from ...
通过日志服务迁移日志数据至MaxCompute
说明 日志服务数据的一个字段最多允许映射到一个MaxCompute表的列（数据列或分区列），不支持字段冗余，同一个字段名第二次使用时其投递的值为null，如果null出现在分区列会导致数据无法被投递。MaxCompute分区列 按顺序左边填写与...
如何实现不锁表转冷存
repack-U user1-dbname=db01-index=tblname_partial_idx-tablespace=oss 分区表不锁表转冷存-prt是一个分区表，包含4个分区：prt_p_0、prt_p_1、prt_p_2、prt_p_def（默认分区）-通过pg_repack将分区表转存到oss（不包含索引）pg_repack-U ...
多元索引最佳实践
在订单场景中，当用户拼接“UserId+商品ID”作为分区键且商品ID是自增的时，如果某个UserId的写TPS过高，则会发生写尾部分区问题，即写入的均为Tablestore数据表的最后一个分区，这样写入数据会影响多元索引的同步延时和查询性能。...
- 产品推荐
- 这些文档可能帮助您