ePQ支持分区表查询
segments:6)->Append->Partial Seq Scan on t1_p1 Filter:(id)Optimizer:PolarDB PX Optimizer(5 rows)由于查询的过滤条件 id包含分区键，因此ePQ优化器可以根据分区表的分区边界，在产生执行计划时去掉不符合过滤条件的子分区（t1_p2、t1_...
ePQ支持分区表查询
segments:6)->Append->Partial Seq Scan on t1_p1 Filter:(id)Optimizer:PolarDB PX Optimizer(5 rows)由于查询的过滤条件 id包含分区键，因此ePQ优化器可以根据分区表的分区边界，在产生执行计划时去掉不符合过滤条件的子分区（t1_p2、t1_...
数字翻牌器
var value=Math.random()*10000 return[{"name":"","value":12345+value }]序列执行节点：首先将数据保存为临时变量，接着将两个数字翻牌器进行加法运算，导入显示组件中。变量A return { data:[{ name:"up",value:data[0].value|0 }]};...
并行查询配置参数说明
AUTO：开启弹性并行，会根据集群分组内节点的实时负载信息做调度，本地节点计算资源不足时，会尝试选择其它有空闲资源的节点调度执行。查询代价超过阈值后选择多机并行。MULTI_NODES：强制多机并行，最大并行度会随节点数增加而成倍增加，...
列存索引技术架构介绍
除物理算子需要支持并行外，IMCI的优化器也支持生成并行执行计划，优化器在确定一个表的访问方式时，会根据需要访问的数据量来决定是否启用并行执行，如果确定启用并行执行，则会参考一系列状态数据（包括当前系统可用的CPU/Memory/IO资源...
Hive连接器
使用Hive连接器可以查询和分析存储在Hive数据仓库中的数据。背景信息 Hive数仓系统由以下三部分内容组成：不同格式的数据文件，通常存储在Hadoop分布式文件系统（HDFS）或对象存储系统（例如，阿里云OSS）中。存储着数据文件到Schema和...
使用场景
何时会用到并行查询 有几种设置会导致查询规划器在任何情况下都不生成并行查询计划。为了让并行查询计划能够被生成，必须配置好下列设置。max_parallel_workers_per_gather 必须被设置为大于零的值。这是一种特殊情况，更加普遍的原则是...
常见问题
在使用云连接器过程中，必须使用定向物联网卡，定向物联网卡可以通过以下方式获得：存量通用物联网卡转定向物联网卡 针对存量通用物联网卡需要转定向物联网卡的情况需要运营商做变更，由物联网卡供应商完成，阿里云可配合提供相应变更材料...
基本概念
并行伸缩活动 通过以下方式触发的伸缩活动为并行伸缩活动：手动执行伸缩规则、通过定时任务执行伸缩规则 手动添加ECS实例、手动移出ECS实例 期望实例数检查任务、实例健康检查任务、最大最小值检查任务 如果有执行中的并行伸缩活动，可以再...
运行及排错
是否并行 可以选择 不并行 或指定允许几组任务同时运行。自动跳转至 补数据实例 页面，单击相应的实例，即可看到实例DAG图。右键单击实例，可以查看该实例的依赖关系和详细信息，并进行终止运行、重跑等具体操作。说明 补数据任务的实例...
流程配置
任务：在阶段中具体需要完成的动作，任务之间可以串行执行也可以并行执行，目前任务包括：代码扫描、单元测试、构建、部署、合并代码、人工审核等功能。步骤：步骤作为 Flow 最底层的核心能力，所有的流水线都是通过步骤的编排组合而成的。...
PolarDB PostgreSQL版架构介绍
同时，PolarDB PostgreSQL版 具有大规模并行计算能力，可以应对OLTP与OLAP混合负载。还具有时空、向量、搜索、图谱等多模创新特性，可以满足企业对数据处理日新月异的新需求。PolarDB PostgreSQL版 支持多种部署形态：存储计算分离部署、X-...
过滤器管理
在过滤器卡片页右上角可以做以下操作。单击修改时间，可以按 名称、修改时间 和 创建时间 对当前过滤器进行排序。单击搜索框，输入过滤器名称，快速定位所需过滤器。重命名过滤器 登录 DataV控制台。在 功能导航 模块单击过滤器，进入过滤...
DataV读取数据源超时
问题描述 阿里云DataV数据可视化产品主要用于动态、实时数据展示场景，需要对数据...优化调用链路，将可以并行调用的过程并行化处理，压缩接口总时间。增加数据中间层，将多次接口调用的中间链路复用，减少系统消耗。适用于 数据可视化DataV
PolarDB MySQL版8.0.2版本发布日志
支持在分区有裁剪的查询中，优化器可以选择分区表的全局二级索引。2023-10-30 问题修复 修复OSS SERVER的AK信息损坏时，可能出现集群无法启动的问题。修复了部分场景下，GroupJoin算子占用过多内存导致查询失败的问题。修复了部分带有OR谓...
PolarDB PostgreSQL版架构介绍
同时，PolarDB PostgreSQL版（兼容Oracle）具有大规模并行计算能力，可以应对OLTP与OLAP混合负载。还具有时空、向量、搜索、图谱等多模创新特性，可以满足企业对数据处理日新月异的新需求。PolarDB PostgreSQL版（兼容Oracle）支持多种部署...
Notebook
如果是SQL，是可以并行执行的；如果是Scala代码，是串行执行的，因为默认所有Note共享一个SparkContext。相关配置：参数 默认取值 zeppelin.spark.concurrentSQL true zeppelin.spark.currentSQL.max 10 Q：如何使Note之间相互独立？设置 ...
通道服务概述
增量数据变化保序 通道服务为数据划分一到多个可并行消费的逻辑分区，每个逻辑分区的增量数据按写入时间顺序保序，不同逻辑分区的数据可以并行消费。消费延迟监控 通道服务通过DescribeTunnel API提供了客户端消费数据延迟（即当前消费到的...
创建项目
该值为 10 表示同一时间可以并行处理 10 个任务（如文档格式转换、图片标签检测等），查询类 API（如 GetImage 获取图片信息）也会占用该额度。如果您有更高的并行处理要求，请使用钉钉搜索钉钉群号31690030817加入钉钉群进行反馈。授权...
PolarDB HTAP实时数据分析技术解密
在处理大数据量下复杂查询所需要的能力方面，如优化器处理子查询的能力、高性能算子HashJoin、SQL并行执行等。社区将其处于低优先级，因此MySQL的数据分析能力提升进展缓慢。随着MySQL的发展，用户使用其存储了大量的数据，并且运行着关键...
用显式JOIN子句控制规划器
规划器可以自由地按照任何顺序连接给定的表。例如，它可以生成一个使用 WHERE 条件 a.id=b.id 连接 A 到 B 的查询计划，然后用另外一个 WHERE 条件把 C 连接到这个连接表。或者它可以先连接 B 和 C 然后再连接 A 得到同样的结果。或者也...
何时选择HASH分区
使用HASH分区的目的如下：使分区间数据分布均匀，分区间可以并行访问；根据分区键使用分区修剪，基于分区键的等值查询开销减小；随机分布数据，以避免I/O瓶颈。分区键的选择一般要满足以下要求：选择唯一或几乎唯一的列或列的组合；为每个2...
网关接入物联网平台
基于Ubuntu+C+MQTT+物模型的加法器实现 请参见快速体验中的“以物模型编程方式接入设备”，该章节描述了在Ubuntu上使用C SDK实现的一个支持加法运算的设备逻辑。物模型编程以及相关API说明，请参见 C语言的物模型编程指南。注意 非C语言的...
概述
通过性能提示的信息可以了解如何找出一个索引是否被使用以及规划器在何时以及为什么会选择 不 使用索引。索引也会使带有搜索条件的 UPDATE 和 DELETE 命令受益。此外索引还可以在连接搜索中使用。因此，一个定义在连接条件列上的索引可以...
工作原理
关于ECS实例和ECI实例的更多信息，请参见 什么是云服务器ECS 和 什么是弹性容器实例。工作流程 弹性伸缩增加ECS实例的工作流程如下所示：如果某Web应用使用ECS实例处理业务请求，系统架构分为三层（如上图右侧虚线框所示）。其中，最上层的...
使用Stage和Task详情分析查询
部分Stage可以并行执行，但部分Stage之间存在依赖关系，只能串行执行，导致一些复杂SQL语句的查询耗时问题难以分析，您可以调用API或通过控制台使用Stage和Task详情进行慢查询问题分析。本文主要介绍如何使用Stage和Task详情分析查询。操作...
BUILD
不同表的BUILD任务可以并行执行，并行度默认为3。自动触发BUILD任务 自动触发BUILD任务需要满足以下其中一个条件：达到最小BUILD时间间隔（数仓版（3.0）预留模式：0.5小时，数仓版（3.0）弹性模式：1.5小时，湖仓版（3.0）：1.5小时），且...
如何上传大文件到OSS？
加速上传：要上传到OSS的本地文件很大的时候，可以并行上传多个分片以加快上传速度。更多信息，请参见：分片上传 和 断点续传上传。方式二：使用ossbrowser工具上传 ossbrowser工具的使用说明如下：ossbrowser支持临时授权码登录。当前登录...
如何选择应用端连接池
PolarDB-X 兼容MySQL协议，请求在单个连接上串行执行，不同连接上的请求可以并行执行，由此得到以下公式：单个连接的QPS上限=1000/RT 说明 QPS为每秒查询请求数，RT的单位是毫秒，1000是1秒换算成毫秒的数。连接数=应用访问单个CN的QPS上限...
各端播放器公共常见问题
playauth可以理解为点播服务将所有的信息（videoID、AccessKey Id、AccessKey Secret）都进行混合再做加密操作，用户拿到的就是一串包含多个信息的数据，播放器就可以播放。播放模式 适用场景 优劣 是否建议使用 setDataSource 适用于测试 ...
功能概览
如果安装了多个客户端，就可以并行对NAS数据进行备份，提升备份性能。云备份采用永久增量备份机制，除首次全量备份外，后续每次备份仅上传与上一次备份相比的变化数据，在云上合成完整的全量备份，以最大程度缩减网络和存储消耗。云备份...
功能概览
如果安装了多个客户端，就可以并行对大规模文件系统数据进行备份，提升备份性能。云备份采用永久增量备份机制，除首次全量备份外，后续每次备份仅上传与上一次备份相比的变化数据，在云上合成完整的全量备份，以最大程度缩减网络和存储消耗...
计算层变量
MERGE_CONCURRENT 否 FALSE[TRUE|FALSE]全并行执行开关，主要影响DDL和全下推简单查询的并行执行度。MERGE_UNION 否 FALSE[TRUE|FALSE]默认关闭，打开意味着物理SQL不做union优化，且将串行执行下推的物理SQL。MERGE_UNION_SIZE 否-1[0-...
配置备份计划
全量备份并行线程数上限 填写全量备份并行线程数上限，您可以通过设置该参数调节备份速度，例如降低备份线程数，以减少对数据库的影响。不同备份计划规格并行线程数上限不同，具体以控制台为准，更多信息，请参见 如何调节备份速度。备份...
VACUUM
对于并行清理，每个处理器的睡眠与该处理器完成的工作成比例。PolarDB包括了一个“autovacuum”工具，它可以自动进行例行的清理维护。示例 清理单一表 onek，为优化器分析它并且打印出详细的清理活动报告：VACUUM(VERBOSE,ANALYZE)onek;
PolarDB MySQL版8.0.1版本发布日志
修复并行查询将GROUP BY下推到Worker上去并行执行时，在有分区表的情况下，返回结果集中存在分组重复的问题。修复执行 EXCHANGE PARTITION 操作时，因索引顺序不同导致索引损坏，无法访问表数据的问题。修复主键不包含分区键的分区表在使用...
什么是PolarDB PostgreSQL版（兼容Oracle）
代理层不仅可以做安全认证和保护，还可以解析SQL，把写操作发送到主节点，把读操作均衡地分发到多个只读节点，实现自动的读写分离。对于应用程序来说，就像使用一个单点的数据库一样简单。产品优势 您可以像使用Oracle一样使用 PolarDB ...
概述
查询优化器 支持Partial Partition Wise join 无 支持Partition动态剪枝 支持Partition Index Pruning 支持分区粒度的统计信息（Hyperloglog）分区表支持分区间的并行扫描 支持全局索引优化器选择和并行扫描 支持分区与MPP相结合 分区粒度...
定制执行计划（pg_hint_plan）
RDS PostgreSQL提供pg_hint_plan插件，可以通过特殊的注释语句提示，使PostgreSQL改变其既定的执行计划。前提条件 实例大版本为PostgreSQL 10或以上版本。说明 如果无法创建该插件，请先 升级内核小版本。使用该插件前，需要将pg_hint_plan...
pg_hint_plan
如果第三个参数是soft（默认），表示仅修改max_parallel_workers_per_gather参数的值，由优化器决定实际的并行度。hard表示强制使用其指定的并行度。PX()表示 跨机并行查询 时进行并行查询。说明表示并行度。NoPX()表示针对此查询强制不...
- 产品推荐
- 这些文档可能帮助您