使用IMB软件和MPI通信库测试集群通信性能
MPI（Message Passing Interface）是支持多编程语言编程的并行计算通信库，具有高性能、大规模性、可移植性、可扩展性等特点。准备工作 创建一个E-HPC集群。具体操作，请参见 使用向导创建集群。配置集群时，软硬件参数配置如下：参数 说明...
实践教程概览
MPI（Message Passing Interface）是支持多编程语言的并行计算通信库，具有高性能、大规模性、可移植性、可扩展性等特点。本教程以IMB软件和MPI通信库为例介绍如何测试E-HPC集群的通信性能。测试SCC集群性能 超级计算集群SCC具有无虚拟化...
灵骏常见问题
而神经网络是高度并行的，非常适合用GPU进行计算。最典型的例子比如卷积，每个卷积计算都独立于其他卷积计算，这意味着任何计算都不依赖于其他计算的结果。您使用神经网络进行的许多计算都可以很容易地分解成更小的计算，各个小计算不会...
查询执行器介绍
例如，还是以上面的查询为例，它的并行执行计划如下所示：Gather(parallel=true)ParallelHashAgg(group="o_orderdate,o_shippriority,l_orderkey",revenue="SUM(*)")ParallelHashJoin(condition="o_custkey=c_custkey",type="inner")...
PolarDB PostgreSQL（兼容Oracle）2.0版本商业化公告
例如，PL/pgSQL函数内的 RETURN QUERY 返回结果时支持QUERY的并行计算，REFRESH MATERIALIZED VIEW 命令也可以使用并行查询。此外，支持并行顺序扫描chunk，提高大范围数据扫描的IO吞吐，使其接近块设备的IO吞吐极限。索引增强 PolarDB ...
基于eRDMA增强型实例部署AI训练集群
在NCCL底层通信链接上，有多种不同的传输方式，例如单机内部多卡P2P通信以及多机上的传统socket通信（如VPC网络）和高性能的InfiniBand（IB）通信，其中eRDMA是一种基于RDMA的传输方式，具有极低的延迟，并且在性能上接近RDMA网络的优势。...
什么是GPU云服务器
GPU云服务器提供了GPU加速计算能力，实现GPU计算资源的即开即用和弹性伸缩。其作为阿里云弹性计算家族的一员，结合了GPU计算力与CPU计算力，满足您在人工智能、高性能计算、专业图形图像处理等场景中的需求，例如，在并行运算方面，使用GPU...
阿里云异构计算产品总览
更多信息，请参见 什么是AI分布式训练通信优化库AIACC-ACSpeed。AI训练计算优化编译器AIACC-AGSpeed：是阿里云推出的一个基于PyTorch深度学习框架研发的计算优化编译器，用于优化PyTorch深度学习模型在阿里云GPU异构计算实例上的计算性能。...
什么是物联网平台
阿里云物联网平台是一个集成了设备接入、设备管理、数据安全通信、消息订阅、消息转发和数据服务（存储、分析、过滤、解析、集成等）等能力的一体化平台。向下支持连接海量设备，采集设备数据上云；向上提供云端API，服务端可通过云端SDK...
物联网平台相关问题
消息通信 基于物联网平台，开发设备管理的通信模式是什么样的？设备上报数据至物联网平台后，如何存储到数据库（MySQL、SQL Server）？物联网平台和消息队列（RocketMQ）都是用于消息通信的产品，它们有什么区别？设备发送给物联网平台的...
弹性并行查询（Elastic Parallel Query）常见问题
如果您希望在SQL语句级别生效，可以通过/*+PARALLEL(n)*/或者/*+SET_VAR(max_parallel_degree=n)*/设置查询的并行度为 n，但两种设置方式会有所区别：当使用/*+PARALLEL(n)*/时，会强制开启并行查询，不考虑查询是否已经分发到RW节点，也不...
PolarDB并行查询
全算子的并行支持，包括上面提到的复杂的多层嵌套结构，也可以做到完全的并行。引入exchange算子，即支持Shuffle/Broadcast等数据分发操作。引入一定自适应能力，即使并行优化完成了，也可以根据资源负载情况做动态调整，如回退串行或降低...
并行操作
并行度参数 如果支持并行操作的函数未指定并行度或指定并行度为0，则使用GUC（Grand Unified Configuration）参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1，表示不支持并行执行。每个支持并行...
并行操作
并行度参数 如果支持并行操作的函数未指定并行度或指定并行度为0，则使用GUC（Grand Unified Configuration）参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1，表示不支持并行执行。每个支持并行...
深度解析PolarDB数据库并行查询技术
本文主要介绍基于代价进行并行优化、并行执行的云数据库的并行查询引擎的关键问题和核心技术。背景信息 随着数据规模的不断扩大，用户SQL的执行时间越来越长，这不仅对数据库的优化能力提出更高的要求，并且对数据库的执行模式也提出了新的...
开启时空并行查询
并行查询原理 PG并行查询是表级的并行，其并行查询示意图如下。注意事项 并行查询的worker数量越大，查询时CPU负载越重，对于CPU负载本身较重的场景建议woker数量设置为2较合适，即max_parallel_workers_per_gather=2。对于服务器内存有限...
开启时空并行查询
并行查询原理 PG并行查询是表级的并行，其并行查询示意图如下。注意事项 并行查询的worker数量越大，查询时CPU负载越重，对于CPU负载本身较重的场景建议woker数量设置为2较合适，即max_parallel_workers_per_gather=2。对于服务器内存有限...
开启时空并行查询
并行查询原理 PG并行查询是表级的并行，其并行查询示意图如下。注意事项 并行查询的worker数量越大，查询时CPU负载越重，对于CPU负载本身较重的场景建议woker数量设置为2较合适，即max_parallel_workers_per_gather=2。对于服务器内存有限...
技术原理
反过来，当计划的并行部分产生大量的元组时，领导者将几乎全用来读取由工作者产生的元组并且执行 Gather 或 Gather Merge 节点上层计划节点所要求的任何进一步处理。在这些情况下，领导者所作的执行并行部分的工作将会很少。当计划的并行...
并行操作
设置并行度 如果支持并行操作的函数未指定并行度或指定并行度为0，则使用GUC（Grand Unified Configuration）参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1，表示不支持并行执行。您也可以在支持...
并行操作
设置并行度 如果支持并行操作的函数未指定并行度或指定并行度为0，则使用GUC（Grand Unified Configuration）参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1，表示不支持并行执行。您也可以在支持...
对分区表使用跨机并行查询
功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。支持分区表join查询。支持多级分区的并行查询 使用...
对分区表使用跨机并行查询
功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。支持分区表join查询。支持多级分区的并行查询 使用...
并行操作
设置并行度 如果支持并行操作的函数未指定并行度或指定并行度为0，则使用GUC（Grand Unified Configuration）参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1，表示不支持并行执行。您也可以在支持...
并行INSERT
本文介绍了 PolarDB PostgreSQL版 的并行INSERT功能。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 11（内核小版本1.1.17及以上）PostgreSQL 14（内核小版本14.8.12.0及以上）说明 您可通过如下语句查看 PolarDB ...
8.0.2版本发布说明
并行查询2.0 在8.0.1版本中的并行查询功能，查询的执行模式是相对简单的两阶段执行模型（scatter-gather模型），在功能及性能上存在一定的局限性，具体如下：简单的执行框架，导致某些重度计算算子（分组聚集）可能存在单点瓶颈；...
统计分析
统计分析功能可以查询指定AppID下的活跃用户、频道、并发频道峰值及并发通信峰值，方便您监控和分析应用的使用情况。通过阅读本文，您可以了解统计分析的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 统计分析，进入...
统计分析
统计分析功能可以查询指定AppID下的活跃用户、频道、并发频道峰值及并发通信峰值，方便您监控和分析应用的使用情况。通过阅读本文，您可以了解统计分析的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 统计分析，进入...
并行查询配置参数说明
parallel_degree_policy Global 设置单个查询的并行度配置策略，取值范围如下：TYPICAL：PolarDB 选择查询并行度时不会考虑数据库负载（如CPU使用率等），而尽可能与 max_parallel_degree 设置的并行度保持一致。AUTO：PolarDB 会根据数据...
ePQ支持并行写入及查询OSS外部表
执行以下命令，启用ePQ以及ePQ并行 INSERT 功能，设置并行查询本地表的并行度为16，设置并行写入OSS外部表的并行度为16。SET polar_enable_px TO ON;SET polar_px_enable_insert_select TO ON;SET polar_px_dop_per_node TO 16;SET polar_...
ePQ支持并行写入及查询OSS外部表
执行以下命令，启用ePQ以及ePQ并行 INSERT 功能，设置并行查询本地表的并行度为16，设置并行写入OSS外部表的并行度为16。SET polar_enable_px TO ON;SET polar_px_enable_insert_select TO ON;SET polar_px_dop_per_node TO 16;SET polar_...
快速开始
具体操作请参见 配置数据库代理 的并行查询说明。并行查询推荐设置以及相关说明如下：多机并行引擎可以根据查询代价以及集群实时负载情况自适应弹性调度，建议开启多机并行以获得更优的加速效果。并行度参数从低到高逐渐增加，建议不要超过...
使用跨机并行查询加速索引创建
当使用跨机并行查询功能加速Btree索引构建时，系统会自动构建出一个QC进程完成对基表项的并行扫描，并由索引构建进程接收QC进程扫描结果完成后续的索引创建逻辑。注意事项 当前仅支持简单场景，对普通列类型的索引构建过程，暂不支持...
并行查询
PolarDB PostgreSQL版 支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版 对分区表的并行查询，和普通...
使用跨机并行查询加速索引创建
当使用跨机并行查询功能加速Btree索引构建时，系统会自动构建出一个QC进程完成对基表项的并行扫描，并由索引构建进程接收QC进程扫描结果完成后续的索引创建逻辑。注意事项 当前仅支持简单场景，对普通列类型的索引构建过程，暂不支持...
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版（兼容Oracle）...
并行资源控制策略配置
PolarDB 支持通过多种策略控制单个查询或全局的总并行度，以保证在资源负载允许的情况下选择合理的并行度。并行查询排队策略参数 max_parallel_workers 为单个节点内允许同时运行的最大并行worker线程数，超过 max_parallel_workers 后新的...
通信监测
通信监测功能可以查询指定AppID下全链路通话数据（包含通信质量和频道数据）。通过阅读本文，您可以了解通信监测的查询方法和通信监测作用。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 观星台>通信监测，进入通信监测界面。选择...
概述
结合 PolarDB PostgreSQL版（兼容Oracle）存储计算分离的架构，可以做到弹性扩展：当算力不够时，可以弹性地增加只读节点，新增的只读节点加入分布式的并行计算中，而不需数据重新分片（Reshard）。不会出现数据倾斜问题。使用场景 日常...
通信监测
通信监测功能可以查询指定AppID下全链路通话数据（包含通信质量和频道数据）。通过阅读本文，您可以了解通信监测的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 观星台>通信监测，进入通信监测界面。选择待查询的AppID...
- 产品推荐
- 这些文档可能帮助您