并行创建空间索引
本功能采用空间排序（GiST Sort）...设置并行Worker内存使用总量，建议至少设置1GB。set maintenance_work_mem='1GB';创建GiST索引。create index on t using gist(geom);当需要关闭此功能时，使用如下命令。set polar_enable_gist_sort=off;
并行创建空间索引
本功能采用空间排序（GiST Sort）...设置并行Worker内存使用总量，建议至少设置1GB。set maintenance_work_mem='1GB';创建GiST索引。create index on t using gist(geom);当需要关闭此功能时，使用如下命令。set polar_enable_gist_sort=off;
跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）提供了跨机并行查询（Parallel Execution）的功能，支持多个计算节点分布式地执行SQL查询，加速 PolarDB PostgreSQL版（兼容Oracle）的分析型查询性能，充分发挥存储层PolarFileSystem的高I/O吞吐能力，...
WAL日志并行回放
在 PolarDB PostgreSQL版 的一写多读架构下，只读节点（Replica 节点）运行过程中，LogIndex后台回放进程（LogIndex Background Worker）和会话进程（Backend）分别使用LogIndex数据在不同的Buffer上回放WAL日志，本质上达到了一种并行回放...
WAL日志并行回放
只读节点（Replica 节点）运行过程中，LogIndex后台回放进程（LogIndex Background Worker）和会话进程（Backend）分别使用LogIndex数据在不同的Buffer上回放WAL日志，本质上达到了一种并行回放WAL日志的效果。鉴于WAL日志回放在 PolarDB ...
CPFS并行文件存储
CPFS并行文件存储 提供高性能计算文件存储，支持标准的POSIX和MPI-IO协议，自带的高性能计算程序无需任何接口适配和性能优化即可高效执行，满足高性能文件存储需求。产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件...
并行资源控制策略配置
系统资源使用限制 AUTO策略下，PolarDB 会根据数据库的CPU、内存或IOPS资源的使用率来决定是否禁止并行查询计划，并支持在需要并行执行的前提下，自定义并行查询的并行度选择策略。参数 级别 取值 说明 loose_auto_dop_cpu_pct_hwm Global ...
免费体验弹性并行查询ePQ
本文介绍了如何免费体验弹性并行查询ePQ带来的查询加速及性能提升。背景 PolarDB MySQL版 8.0版本重磅...相关内容 弹性并行查询（ePQ）使用说明 并行度控制策略 ePQ常见问题 专家面对面 您可以使用钉钉扫码加入官方钉钉群，获取更多技术支持。
并行查询配置参数说明
parallel_degree_policy Global 设置单个查询的并行度配置策略，取值范围如下：TYPICAL：PolarDB 选择查询并行度时不会考虑数据库负载（如CPU使用率等），而尽可能与 max_parallel_degree 设置的并行度保持一致。AUTO：PolarDB 会根据数据...
ROLLUP的并行加速
您可以使用 ROLLUP 语法实现只借助一条查询语句，就计算出数据在不同维度上划分组之后得到的统计结果以及所有数据的总体值。本文将介绍如何使用 ROLLUP 语法。前提条件 PolarDB 集群版本需为 PolarDB MySQL版 8.0且Revision version为8.0.1...
Hash Join的并行加速
本文介绍如何在 PolarDB 的并行查询中使用Hash Join功能。简单并行Hash Join 前提条件 集群版本需为 PolarDB MySQL版 8.0 集群版，且Revision version为8.0.2.1.0或以上，您可以参见 查询版本号 确认集群版本。并行策略 上图中是并行度为4...
Window Function的并行加速
在Window Function中只有使用了Partition by子句，才可以并行执行查询。使用方法 语法：目前在 PolarDB 中Window Function只能通过 EXPLAIN FORMAT=TREE 语句来显示。示例：如下示例中创建了1张表 employee_salaries，且在表里插入了一些...
并行查询测试方法
在使用InfiniDB官方测试脚本进行测试时，需要用该工具生成tpch相关表数据。qgen：SQL生成工具。生成初始化测试查询，由于不同的seed生成的查询不同，为了结果的可重复性，请使用 附件 提供的22个查询语句。使用TPC-H生成测试数据。dbgen-s ...
启动加速-模块并行启动
SOFABoot 加快应用启动速度的方式主要有 2 种：模块并行启动 异步初始化方法 本文介绍如何...在使用过程中，如果您希望关闭并行启动，可以在 application.properties 中增加以下参数：com.alipay.sofa.boot.module-start-up-parallel=false
Semi-Join的并行加速
您可以使用Semi-Join半连接优化子查询，减少查询次数，提高查询性能。本文将介绍Semi-Join半连接的基本信息和操作方法。前提条件 PolarDB 集群版本需为 PolarDB MySQL版 8.0版本且修订版本满足以下条件：8.0.1.0.5 或以上。8.0.2.2.7 或...
深度解析PolarDB数据库并行查询技术
本文主要介绍基于代价进行并行优化、并行执行的云数据库的并行查询引擎的关键问题和核心技术。背景信息 随着数据规模的不断扩大，用户SQL的执行时间越来越长，这不仅对数据库的优化能力提出更高的要求，并且对数据库的执行模式也提出了新的...
计算节点范围选择与并行度控制
在最大程度利用闲置计算资源进行并行查询，提升资源利用率的同时，避免了对其它业务负载产生影响：ePQ可以动态调整集群中参与并行查询的计算节点范围，避免使用负载较高的计算节点。ePQ支持为每条查询动态调整在计算节点上的并行度，避免...
计算节点范围选择与并行度控制
在最大程度利用闲置计算资源进行并行查询，提升资源利用率的同时，避免了对其它业务负载产生影响：ePQ可以动态调整集群中参与并行查询的计算节点范围，避免使用负载较高的计算节点。ePQ支持为每条查询动态调整在计算节点上的并行度，避免...
弹性并行查询（ePQ）发布说明
PolarDB MySQL版 重磅推出了弹性并行查询（ePQ）引擎，可以将分析型查询的计算任务分发到集群内的任意节点执行，提升集群资源的利用率，从而大幅提升数据库的整体查询性能。简介 对于复杂分析型查询场景，PolarDB MySQL版 已支持的 单机...
ePQ支持并行写入及查询OSS外部表
PolarDB PostgreSQL版（兼容Oracle）的弹性跨机并行查询（ePQ）支持并行写入及查询OSS外部表。背景信息 PolarDB PostgreSQL版（兼容Oracle）支持通过 oss_fdw 插件创建OSS外部表，其物理存储位于 阿里云对象存储OSS 上，在数据库内仅保存表...
ePQ支持并行写入及查询OSS外部表
PolarDB PostgreSQL版（兼容Oracle）的弹性跨机并行查询（ePQ）支持并行写入及查询OSS外部表。背景信息 PolarDB PostgreSQL版（兼容Oracle）支持通过 oss_fdw 插件创建OSS外部表，其物理存储位于 阿里云对象存储OSS 上，在数据库内仅保存表...
ePQ支持并行写入及查询OSS外部表
PolarDB PostgreSQL版 的弹性跨机并行查询（ePQ）支持并行写入及查询OSS外部表。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.9.13.0及以上）PostgreSQL 11（内核小版本1.1.35及以上）说明 您可通过如下...
创建物化视图的跨机并行加速和批量写入
使用说明 ePQ并行扫描 通过设置 polar_px_enable_create_table_as 参数的值，开启或关闭ePQ并行扫描来加速 CREATE TABLE AS 语法中的查询过程。取值如下：ON（默认）：开启ePQ并行扫描来加速 CREATE TABLE AS 语法中的查询过程。OFF：关闭...
创建物化视图的跨机并行加速和批量写入
使用说明 ePQ并行扫描 通过设置 polar_px_enable_create_table_as 参数的值，开启或关闭ePQ并行扫描来加速 CREATE TABLE AS 语法中的查询过程。取值如下：ON（默认）：开启ePQ并行扫描来加速 CREATE TABLE AS 语法中的查询过程。OFF：关闭...
将本地表并行导出至OSS引擎
上述三者之间用/连接。当前任务单独的路径中可以包含多个/，表示使用多级路径。上传到OSS引擎后，其整体的文件路径为：OSS server中的路径+单独的路径。outfile_path 中必须包含上传后的文件名，用来说明最后生成的文件名。table_name 表...
快速开始
例如，刚开始使用并行查询时，设置并行度参数为2，试运行一天后，如果CPU压力不大，可以持续上调；如遇到CPU压力较大，停止上调。并行度为单个查询在单计算节点内最大允许同时运行的worker线程数，如果选择多机并行，单个查询最大允许同时...
使用场景
例如：用 DECLARE CURSOR 创建的游标将永远不会使用并行计划。类似地，一个 FOR x IN query LOOP.END LOOP 形式的 PL/pgSQL 循环也永远不会使用并行计划，因为当并行查询进行时，并行查询系统无法验证循环中的代码执行起来是安全的。使用了...
kvpair子句
Ha3>=3.8.0版本请使用新的实现：Hint 注意：新老实现不兼容，请勿同时启用 parallelTables(Ha3适用)多个table间用'|'分隔，配合并行使用，表示哪些table可以支持拆分并行，主要用于join场景 databaseName 指定默认dbName，用于qrs访问对应...
kvpair子句
Ha3>=3.8.0版本请使用新的实现：Hint 注意：新老实现不兼容，请勿同时启用 parallelTables(Ha3适用)多个table间用'|'分隔，配合并行使用，表示哪些table可以支持拆分并行，主要用于join场景 databaseName 指定默认dbName，用于qrs访问对应...
参数配置指导
NA NA zero优化器，梯度和模型参数联合状态切分 使用说明：zero显存优化只能和trainer配合使用，oss、sdp、fsdp显存优化可以用在无Trainer的代码中使用。加速开关设置：3D混合并行（Data，Tensor，Pipeline并行）参数名 取值类型 是否必选 ...
基本概念
并行循环步骤（foreach）步骤类型之一，使用并行循环步骤并行执行多个相同的步骤。成功步骤（succeed）步骤类型之一，使用成功步骤提前结束一系列串行的步骤。成功步骤通常和选择步骤结合使用，在选择步骤条件满足的情况下跳转到一个成功...
SELECT
使用限制 如果查询使用索引回查主表功能，那么将无法使用并行查询能力。通常建议在创建索引时将查询所需列冗余，避免回查主表。示例 采用默认最大并行度 说明 并行查询能力默认为关闭状态，请 提交工单 开启并行查询功能。不指定并行度时，...
2021年
使用跨机并行查询加速索引创建 支持从三种粒度指定跨机并行查询的范围：系统粒度：指定所有session所有查询是否开启跨机并行查询。会话粒度：指定当前session是否开启跨机并行查询。查询粒度：指定具体查询是否开启跨机并行查询。使用跨机...
- 产品推荐
- 这些文档可能帮助您