分区表扫描算子
PTS不支持智能分区连接（Partition Wise Join），如果您打开了 enable_partitionwise_join，将不会生成带有PTS算子的执行计划。参数说明 参数名称 说明 polar_num_parts_for_pts 用于控制开启PTS算子的条件。默认值为64，取值如下：当设置...
不一致情况
事务开启时，set autocommit=0部分成功部分失败，则失败的部分分区连接将被关闭（set autocommit=0语句被延迟执行，此前已经向 client 保证了成功，此处仅能关闭执行失败的部分分区，成功的分区将进入事务），同时向 client 返回 error ...
分区连接
PolarDB PostgreSQL版 支持分区连接（Partition-Wise Join）功能，可以减少分区之间的无效连接，提升连接查询的性能。概述 分区连接用于两个分区表之间Join优化。当分区表之间使用分区键进行Join时，可以通过分区连接减少分区之间无效的...
分区连接
PolarDB PostgreSQL版（兼容Oracle）支持分区连接（Partition-Wise Join）功能，可以减少分区之间的无效连接，提升连接查询的性能。概述 分区连接用于两个分区表之间Join优化。当分区表之间使用分区键进行Join时，可以通过分区连接减少分区...
概述
分区连接（PartitionWise Joins）：在连接分区时，根据分区条件将分区表打散成分区与分区之间的连接，过滤不符合条件的分区之间的连接，把连接的数据控制在最小范围内，提高查询效率。统计信息管理：相比普通表，以分区粒度进行的信息统计...
基本SET语句
连接内新建立的后端分区连接，均会进行一轮全量环境变量设置，保证新连接具有最新的环境变量内容。不支持具有历史依赖关系的环境变量，如 set a=1,set b=a+1,set a=b+1，所有环境变量的设置必须是自包含且幂等的单变量设置语句。
何时使用Range-Hash分区
对于这些类型的表（典型的数据仓库系统)，组合Range-Hash分区提供了在Range级别进行分区修剪的优势，并有机会在Hash级别执行并行的全分区或部分分区连接。对于特定的SQL语句，特定的情况可以从两个维度上的分区修剪中受益。组合Range-Hash...
数据建模
但是目前需要等到下次分区自动切换时，修改后的时间分区才会生效，对于已经创建的分区无法生效。ALTER DATABASE DB4 WITH(partition_interval=60);冷热存储分界线 Lindorm时序引擎支持数据的冷热分层存储，但需要先开通冷存储，具体操作，...
创建表并导入数据
并行 DML、分区剪枝和分区连接等性能非常重要。Hash 分区的分区键必须是整数类型或 YEAR 类型，并且可以使用表达式。CREATE TABLE tbl1(col1 INT PRIMARY KEY,col2 INT)PARTITION BY KEY()PARTITIONS 5;Query OK,0 rows affected 操作步骤 ...
Windows主机上磁盘无法分区
概述 本文主要介绍Windows主机上磁盘无法分区的解决方案。问题症状 Windows主机上磁盘无法进行分区，系统工具操作异常。解决方案 做好快照备份，然后将基本磁盘 转换为动态磁盘，重新分区操作，恢复正常。右键单击 我的电脑 选择 管理，弹...
创建服务器迁移任务
使用块复制能有效提升迁移传输速度的稳定性，同时能够保证跟源分区结构一致，但分区大小无法修改。说明 迁移源为Windows操作系统时，块复制功能默认为开启状态，无法关闭该功能。迁移演练 迁移演练功能可以帮助您在实际迁移前充分了解迁移...
消息队列Kafka
本文为您介绍如何使用消息队列Kafka连接器。背景信息 Apache Kafka是一款开源的分布式消息队列系统，广泛用于高性能数据处理、流式分析、数据集成等大数据领域。Kafka连接器基于开源Apache Kafka客户端，为阿里云实时计算Flink提供高性能的...
客户端及连接池
客户端连接 使用JDBC等连接器，必须指明连接的库，否则无法执行；不支持游标访问；跨分区语句将会在每个分区上建立一条连接，可能导致分区的连接数成比例增加；COM_QUERY语句长度：当前限制用户SQL语句不得超过16 MB，间接要求用户的单行...
如何使用“会话追踪方案”排查解析异常
排查场景：APM显示HTTPDNS服务质量有问题 当您接入了APM组件（即线上版端性能分析工具），APM组件中显示HTTPDNS服务出现无法连接的问题时 请提交HTTPDNS工单，并提供以下信息：APM系统截图：连接失败或返回错误时的URL地址、出现的错误信息...
扩容分区和文件系统（Linux）
在ECS控制台上扩容云盘容量后，对应分区和文件系统并未扩容，您还需要进入ECS实例内部继续扩容云盘的分区和文件系统，将扩容部分的容量划分至已有分区及文件系统内，使云盘扩容生效。本文为您介绍如何通过两个步骤完成Linux实例云盘的分区...
MAX_PT
如果您需要获取分区表中有数据的最小分区，无法使用SQL语句 select*from table where pt=min_pt("table");实现与 max_pt 函数类似的功能，但可以使用标准SQL语句 select*from table where pt=(select min(pt)from table);实现相同的效果。...
管理APM Server实例
本文为您介绍如何管理APM Server实例，包括修改配置文件、变更实例规格和启动、停止、删除。修改配置文件 登录 阿里云...删除 执行该操作后，将释放APM Server实例，释放后无法恢复，并无法接收APM代理上传的数据，请谨慎操作。单击 确认。
全局索引
全局索引（GLOBAL INDEX）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.6.4.0及以上）说明 您可通过如下语句查看 ...
分区裁剪
1)(cost=0.00.431.00 rows=1 width=24)Filter:(region~'usa':text)动态分区裁剪 概述 在PREPARE-EXECUTE执行方式和分区约束表达式中包含子查询的场景中，查询规划阶段无法确定分区约束，只能在执行阶段，通过外部参数和子查询的结果进行...
Topic分区倾斜怎么办？
问题现象 Topic分区倾斜导致部分磁盘水位偏高，无法充分使用所有磁盘性能和容量。Topic分区倾斜导致部分节点流量过高，触发单节点限流。可能原因 创建Topic时没有按照推荐的倍数设置分区数。解决方案 登录 云消息队列 Kafka 版 控制台，在...
OPT_PARAM Hints
enable_partitionwise_join 允许或禁止查询规划器使用面向分区的连接，这使得分区表之间的连接以连接匹配分区的方式来执行。面向分区的连接当前只适用于连接条件包括所有分区键的情况，连接条件必须是相同的数据类型并且子分区集合需要1对1...
OPT_PARAM Hints
enable_partitionwise_join 允许或禁止查询规划器使用面向分区的连接，这使得分区表之间的连接以连接匹配分区的方式来执行。面向分区的连接当前只适用于连接条件包括所有分区键的情况，连接条件必须是相同的数据类型并且子分区集合需要1对1...
Topic删除后不能减少分区？
可能原因 老版本删除Topic时，不会彻底清除路由，导致再次创建Topic时无法减少分区。升级到新版本后，那些曾经在老版本删除过的Topic，其路由仍然保留着，为了对其进行彻底清除，需要”创建->删除->再创建”Topic，待该流程完成之后，就...
Windows实例中数据恢复
在处理磁盘相关问题时，您可能会碰到操作系统中数据盘分区丢失的情况。本文介绍了Windows系统下常见的数据盘分区丢失的问题以及对应的处理方法，同时提供了使用云盘的常见误区以及最佳实践，避免可能的数据丢失风险。前提条件 已注册阿里云...
分割分区
说明 ALTER TABLE…SPLIT PARTITION 命令无法将分区添加到HASH分区表。分割列表分区 ALTER TABLE sales SPLIT PARTITION americas VALUES('US')INTO(PARTITION us,PARTITION canada);分割范围分区 ALTER TABLE sales SPLIT PARTITION q4_...
列存索引中HashMatch算子的实现
在DoBuild不断构建的过程中，若当前Worker出现内存不足导致HashMap无法插入KV或不能保存chunk数据时，需要将该Worker内存中编号最高分区的数据进行落盘，即将chunks集合按chunk写入临时文件中并释放chunks内存，同时直接删除HashMap而不...
表格存储建表注意事项
但是需要特别注意的是，由于分区键的值是由哈希值和实际值拼接的，应用程序将无法使用分区键进行范围读取的操作（getRange）。为什么一个账户下会有表个数的限制？每个表格存储用户可以创建10个实例，每个实例可以创建64个表，即表格存储...
表的创建和使用
分区名（partition_name）必须是引擎内部统一分区值，可以通过如下的SQL语句获取某个表的所有分区（此SQL暂时无法获取分区信息，有需要请钉钉联系DBA）：select partition_name from information_schema.partitions where table_name='your...
AUTO模式数据库与DRDS模式数据库
自动分区与手动分区 自动分区 自动分区，指创建表时不指定任何分区定义（如分区键、分区策略等），PolarDB-X 能够自动选择分区键并对表及其索引进行水平分区的功能。AUTO模式数据库支持自动分区，而DRDS模式数据库不支持。示例如下：使用...
CREATE TABLE
无法为范围分区指定 NULL。创建范围分区时，由 FROM 指定的下限是一个包含范围，而用 TO 指定的上限是排除范围。也就是说，在 FROM 列表中指定的值是该分区的相应分区键列的有效值，而 TO 列表中的值不是。请注意，必须根据按行比较的规则...
创建GLOBAL INDEX
无法在分区表的分区列上创建GLOBAL INDEX。GLOBAL INDEX拥有以下优势：能提供分区表中非分区列上的唯一约束。带分区表的查询但没有指定分区键场景，用于加速查询的性能，即分区键外的第二查找键。跨机并行查询支持加速创建B-Tree索引的...
使用Logstash（流式数据传输）
多级分区之间用英文逗号（,）连接，分区指定的顺序和建表时的顺序必须一致。partition_time_format 可选。指定当一个字符串型的日期时间字段被分区信息引用时，该字段的 源格式字符串。在本例中，时间字段 timestamp 已经被 date 插件转换...
出错提示“Btrfs has been removed”
问题原因 待迁移的操作系统使用了Btrfs文件系统，而迁移后Anolis/Alibaba Linux不再支持Btrfs文件系统，这会导致使用了Btrfs文件系统的硬盘分区中的文件在迁移后将无法读取，从而导致操作系统迁移失败。解决方案 远程连接ECS实例。具体操作...
ePQ支持分区表查询
智能分区连接 在进行分区表之间的连接操作时，如果分区策略和边界相同，并且连接条件为分区键时，ePQ优化器可以产生以子分区为单位进行连接的执行计划，避免两张分区表进行笛卡尔积式的连接，节省系统资源，提升查询性能。以两张Range分区...
通过Elastic实现Kubernetes容器全观测
Elastic可观测性是通过Kibana可视化能力，将日志、指标及APM数据结合在一起，实现对容器数据的观测和分析。当您的应用程序以Pods方式部署在Kubernetes中，可以在Kibana中查看Pods生成日志、主机和网络上的事件指标及APM数据，逐步缩小排查...
大数据计算服务MaxCompute
增量源表独有 增量源表通过间歇轮询MaxCompute服务器获取所有的分区信息来发现新增的分区，读取新分区时要求分区内数据已写入完毕，详情参见 增量MaxCompute源表监听到新分区时，如果该分区还有数据没有写完，如何处理？通过startPartition...
通过自建APM Server将数据采集至阿里云Elasticsearch
操作流程 步骤一：搭建APM Server 步骤二：配置APM Agent 步骤三：在Kibana中查看并分析APM Server采集的数据 步骤一：搭建APM Server 连接ECS实例。具体操作请参见 通过密码或密钥认证登录Linux实例。说明 本文档以普通用户权限为例。安装...
历史版本常见问题
RDS进行可用区迁移、VPC切换等操作时PolarDB-X 1.0无法连接RDS 现象描述 当RDS进行网络变更（包括可用区迁移、VPC切换等操作）时，PolarDB-X 1.0 无法感知到网络变化，导致连接RDS失败。处理建议 在 PolarDB-X 1.0 控制台使用连接修复功能...
版本发布说明
修复CoHash的Right分区函数计算结果不正确导致的分区路由问题，发布日期：2023-12-27 大版本：V5.4.18 小版本：17034692 类别 说明 新增&优化 新增支持AUTO模式数据库的co_hash分区策略。优化使用AB表方案进行事务日志清理的流程，避免一次...
MaxCompute（原ODPS）数据源配置
如果内容转换插件由于配置错误、无法连接等错误失效，则源字段仍然会被同步到目标字段，只是内容不会被转换。配置插件：重要 目前已经支持的MaxCompute（原ODPS）的字段类型有：Bigint、Double、Boolean、Datetime、String、Decimal。对于...
- 产品推荐
- 这些文档可能帮助您