物模型开发
下面是服务调用进行处理的代码示例：/示例服务是一个加法器，云端服务调用时给出x和y，返回x和y的和 function addFunc(x,y){ let err;if(x=undefined|y=undefined){ err='x or y invail value';return {err,code:10001}/输入参数错误时的...
以太网设备接入物联网平台
基于Ubuntu+C+MQTT+物模型的加法器实现 请参见快速体验中的“以物模型编程方式接入设备”，该章节描述了在Ubuntu上使用C SDK实现的一个支持加法运算的设备逻辑。有关API说明请参见 C语言的物模型编程指南。基于Windows+C+MQTT Topic的数据...
Wi-Fi设备接入物联网平台
基于Ubuntu+C+MQTT+物模型的加法器实现 请参见 快速体验 中的“以物模型编程方式接入设备”，该章节描述了在Ubuntu上使用C SDK实现的一个支持加法运算的设备逻辑。请参见 C语言的物模型编程指南 了解相关API说明。基于Ubuntu+C+MQTT的OTA...
VACUUM
对于并行清理，每个处理器的睡眠与该处理器完成的工作成比例。PolarDB包括了一个“autovacuum”工具，它可以自动进行例行的清理维护。示例 清理单一表 onek，为优化器分析它并且打印出详细的清理活动报告：VACUUM(VERBOSE,ANALYZE)onek;
扩展性原理
针对这类在线数据库上复杂SQL的处理，PolarDB-X 1.0 额外扩展了单机并行处理器（Symmetric Multi-Processing，简称SMP）和多机并行处理器（DAG）。前者完全集成在 PolarDB-X 1.0 内核中；而对于后者，PolarDB-X 1.0 构建了一个计算集群，...
JVM参数配置说明
XX:+UseAdaptiveSizePolicy 设置此选项后，并行收集器自动选择年轻代区大小和相应的Survivor区比例，以达到目标系统规定的最低响应时该间或者收集频率，该值建议使用并行收集器时，并且一直打开。Xmx3550m-Xms3550m-Xmn2g-Xss128k-XX:+...
Flink指标
JM GC Count flink_jobmanager_Status_JVM_GarbageCollector_PS_Scavenge_Count JM年轻代并行回收器运行次数。flink_jobmanager_Status_JVM_GarbageCollector_PS_MarkSweep_Count JM老年代标记-清除回收器运行次数。JM GC Time flink_...
PolarDB并行查询
并行查询实现 并行优化器 在PQ2.0中，由于计划形态会变得更加多样，如果拆分计划只是依靠简单规则和简单统计是很难得到最优解，因此我们重新实现了一套完全基于cost的并行优化器。基本的流程是在MySQL串行优化后，进一步做并行拆分，这里...
深度解析PolarDB数据库并行查询技术
本文主要介绍基于代价进行并行优化、并行执行的云数据库的并行查询引擎的关键问题和核心技术。背景信息 随着数据规模的不断扩大，用户SQL的执行时间越来越长，这不仅对数据库的优化能力提出更高的要求，并且对数据库的执行模式也提出了新的...
弹性并行查询（ePQ）发布说明
PolarDB MySQL版 重磅推出了弹性并行查询（ePQ）引擎，可以将分析型查询的计算任务分发到集群内的任意节点执行，提升集群资源的利用率，从而大幅提升数据库的整体查询性能。简介 对于复杂分析型查询场景，PolarDB MySQL版 已支持的 单机...
技术原理
针对这类在线数据库上复杂SQL的处理，PolarDB-X 1.0 额外扩展了单机并行处理器（Symmetric Multi-Processingy，简称SMP）和多机并行处理器（DAG）。前者完全集成在 PolarDB-X 1.0 内核中；而对于后者，PolarDB-X 1.0 构建了一个计算集群，...
基本概念
FPGA云服务器概念 名词 说明 相关文档 FPGA 现场可编程门阵列（Field Programmable Gate Array），具有硬件并行加速能力和可编程特性。什么是FPGA云服务器 FaaS FPGA即服务（FPGA as a Service），阿里云在云端提供的统一硬件平台与中间件...
在Windows容器中使用基于DirectX的GPU加速
DirectX可以允许GPU从事更多的通用计算工作，同时减轻过载，鼓励开发人员更好地将GPU作为并行处理器使用。步骤一：为Windows节点安装DirectX设备插件 将DirectX设备插件以DaemonSet方式部署到Windows节点上。使用以下内容创建 directx-...
PolarDB MySQL版8.0.2版本发布日志
修复在B-tree较高或B-tree数据倾斜的大表上执行并行查询操作时，可能存在的并行分片数目过少，或并发worker数据不均衡的问题。8.0.2.2.22 类别 说明 发布时间 新增功能和性能优化 支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、...
列存索引技术架构介绍
除物理算子需要支持并行外，IMCI的优化器也支持生成并行执行计划，优化器在确定一个表的访问方式时，会根据需要访问的数据量来决定是否启用并行执行，如果确定启用并行执行，则会参考一系列状态数据（包括当前系统可用的CPU/Memory/IO资源...
常见问题FAQ
优化求解器当前可以快速求解大规模线性规划LP、混合整数线性规划MILP、凸二次规划QP问题，目前支持命令行和C、C++、Python、Java的API调用，可在Windows，macOS和Linux系统下使用。有示例代码和案例分析讲解如何使用，免费。运行产生异常请...
什么是GPU云服务器
其作为阿里云弹性计算家族的一员，结合了GPU计算力与CPU计算力，满足您在人工智能、高性能计算、专业图形图像处理等场景中的需求，例如，在并行运算方面，使用GPU云服务器可显著提高计算效率。为什么选择GPU云服务器 阿里云GPU云服务器是...
LLM on DLC-Megatron on DLC最佳实践
常见的大模型训练技术包括：数据并行技术、模型并行技术（包括张量并行技术和流水并行技术）、优化器状态并行技术、序列并行技术、激活重算技术等：数据并行技术（Data Parallel）：在多个GPU组上有相同的模型参数副本，但读取不同的样本。...
Parallelism Hints
PARALLEL optimizer hint用于强制执行并行扫描；NO_PARALLEL optimizer hint阻止使用并行扫描。摘要 PARALLEL(table[parallel_degree|DEFAULT])NO_PARALLEL(table)说明 并行扫描是指使用多个后台工作线程同时执行给定查询的表（即并行）...
Parallelism Hints
PARALLEL optimizer hint用于强制执行并行扫描；NO_PARALLEL optimizer hint阻止使用并行扫描。摘要 PARALLEL(table[parallel_degree|DEFAULT])NO_PARALLEL(table)说明 并行扫描是指使用多个后台工作线程同时执行给定查询的表（即并行）...
验证分析型查询请求能力
将 orders 表与自身聚合，生成 20,000*20,000 行数据的笛卡尔积，开启 8 个并行执行，对比执行时间，验证云数据库 OceanBase 的实时分析能力。概念介绍 OLAP（Online Analytical Processing）是一种面向分析的、多维数据分析技术。它适用于...
参数说明
parallel_tuple_cost 设置规划器对于从一个并行工作者进程传递一个元组给另一个进程的代价估计。默认是 0.1。min_parallel_table_scan_size 为必须扫描的表数据量设置一个最小值，扫描的表数据量超过这一个值才会考虑使用并行扫描。对于...
实现动态数据加和
var value=Math.random()*10000 return[{"name":"","value":12345+value }]序列执行节点：首先将数据保存为临时变量，接着将两个数字翻牌器进行加法运算，导入显示组件中。变量A return { data:[{ name:"up",value:data[0].value|0 }]};...
OPT_PARAM Hints
enable_parallel_hash 允许或禁止查询规划器对并行哈希使用哈希连接计划类型。如果哈希连接计划没有启用，则此参数不生效。enable_partition_pruning 允许或禁止查询规划器从查询计划中消除一个分区表的分区。同时也控制着规划器产生允许...
OPT_PARAM Hints
enable_parallel_hash 允许或禁止查询规划器对并行哈希使用哈希连接计划类型。如果哈希连接计划没有启用，则此参数不生效。enable_partition_pruning 允许或禁止查询规划器从查询计划中消除一个分区表的分区。同时也控制着规划器产生允许...
OOM常见问题排查指南
UnionALL 如下所示，当SQL中含有大量 union all subquery 时，执行器会并行处理每个 subquery，导致内存压力变大，从而出现OOM。subquery1 union all subquery2 union all subquery3.可以通过如下参数强制执行器串行，减少OOM情况，但查询...
数字翻牌器
var value=Math.random()*10000 return[{"name":"","value":12345+value }]序列执行节点：首先将数据保存为临时变量，接着将两个数字翻牌器进行加法运算，导入显示组件中。变量A return { data:[{ name:"up",value:data[0].value|0 }]};...
并行安全性
规划器把查询中涉及的操作分类成 并行安全、并行受限 或者 并行不安全。并行安全的操作不会与并行查询的使用产生冲突。并行受限的操作不能在并行工作者中执行，但是能够在并行查询的领导者中执行。因此，并行受限的操作不能出现在 Gather ...
弹性并行查询（Elastic Parallel Query）常见问题
当使用/*+SET_VAR(max_parallel_degree=n)*/时，是否并行取决于查询是否路由到RO节点，以及优化器所评估的查询代价和表数据量。更多详情请参见 通过Hint控制。在SQL语句中通过hint设定并行参数与控制台上设置是否有冲突？没有冲突，通过...
PolarDB处理TPC-H查询的挑战和机遇
Detecting Correlation cardinality estimation存在以下问题：如何捕获2列之间的相关性->目标列是什么？如何量化衡量2列间的相关性->如何描述相关性？针对第一个问题，一般会采用查询反馈的方案。也就是在初始时，并不假定其相关性，然后在...
快速开始
设置阈值控制优化器是否选择并行执行 PolarDB 提供了两个阈值来控制优化器是否选择并行执行，SQL语句只要满足其中任意一个条件，优化器就会考虑并行执行。records_threshold_for_parallelism 若优化器估算出语句中存在扫描记录数超过该阈值...
概述
通过性能提示的信息可以了解如何找出一个索引是否被使用以及规划器在何时以及为什么会选择 不 使用索引。索引也会使带有搜索条件的 UPDATE 和 DELETE 命令受益。此外索引还可以在连接搜索中使用。因此，一个定义在连接条件列上的索引可以...
pg_hint_plan
如果第三个参数是soft（默认），表示仅修改max_parallel_workers_per_gather参数的值，由优化器决定实际的并行度。hard表示强制使用其指定的并行度。PX()表示 跨机并行查询 时进行并行查询。说明表示并行度。NoPX()表示针对此查询强制不...
pg_hint_plan
如果第三个参数是soft（默认），表示仅修改max_parallel_workers_per_gather参数的值，由优化器决定实际的并行度。hard表示强制使用其指定的并行度。PX()表示 跨机并行查询 时进行并行查询。说明表示并行度。NoPX()表示针对此查询强制不...
基本概念
什么是云服务器ECS 弹性容器实例（ECI实例）弹性容器实例ECI是阿里云结合容器和Serverless技术为您提供的容器运行服务。什么是弹性容器实例 负载均衡实例 负载均衡实例是一种对流量进行按需分发的服务，通过将流量分发到不同的后端服务来...
新手指引
} 云服务器ECS 什么是云服务器ECS ECS产品优势 ECS基本概念 ECS使用限制 ECS计费方式 与其他云服务的关系 与轻量应用服务器的区别 如何选择ECS实例规格 ECS实例规格族 多种实例规格，满足您不同业务场景 ECS实例规格族 ECS实例选购最佳实践...
工作原理
关于ECS实例和ECI实例的更多信息，请参见 什么是云服务器ECS 和 什么是弹性容器实例。工作流程 弹性伸缩增加ECS实例的工作流程如下所示：如果某Web应用使用ECS实例处理业务请求，系统架构分为三层（如上图右侧虚线框所示）。其中，最上层的...
新手入门路径
对于不了解优化求解器的新手同学，可以通过以下方式去了解和学习使用求解器。如果您是新手，建议您可以通过以下路径快速了解求解器能做什么，然后根据学习案例来学习概念和开发。新手入门学习路径 步骤1.浏览案例 快速浏览 什么是优化求解...
阿里云异构计算产品总览
什么是异构计算 异构计算（Heterogeneous Computing）是指使用不同类型指令集和体系架构的计算单元组成系统的计算方式，目前主要包括GPU云服务器、FPGA云服务器 以及弹性加速计算实例EAIS 等。异构计算能够让最适合的专用硬件去服务最适合...
查看和修改CPU拓扑结构
您可以查看并修改ECS实例的CPU拓扑结构来提高性能、提升并行性以及优化资源分配，以满足您在虚拟化环境、多线程编程、高性能计算等不同场景下的需求。本文介绍如何通过OpenAPI查看和修改实例的CPU拓扑结构。背景信息 什么是CPU 拓扑 CPU...
- 产品推荐
- 这些文档可能帮助您