Windows系统实例的宕机问题排查
定位宕机原因 您可以通过以下方式，定位ECS实例发生宕机的具体原因。方式一：（推荐）通过自助诊断工具定位 登录 ECS管理控制台，左侧导航栏单击 自助问题排查。单击 实例问题排查 页签。选择 实例无法连接或启动异常>实例出现宕机，然后...
并行网关
在拓扑任务中，您可以添加并行网关实现多个节点并行处理效果，满足业务存在多个独立任务需要并行处理的需求，以此提高整体处理性能。本文将快速引导您如何在拓扑任务中使用并行网关。操作步骤 创建拓扑子任务。创建两个或两个以上的简单或...
使用跨机并行查询进行分析型查询
若设置该参数为N，则一个会话在每个节点上将会启用N个px workers进程，用于处理当前的跨机并行查询逻辑。px_workers 指定跨机并行查询是否对特定表生效。默认不生效。跨机并行查询功能比较消耗计算节点集群资源，因此只有对设置了px_...
使用跨机并行查询进行分析型查询
若设置该参数为N，则一个会话在每个节点上将会启用N个px workers进程，用于处理当前的跨机并行查询逻辑。px_workers 指定跨机并行查询是否对特定表生效。默认不生效。跨机并行查询功能比较消耗计算节点集群资源，因此只有对设置了px_...
创建项目
如果您有更高的并行处理要求，请使用钉钉搜索钉钉群号31690030817加入钉钉群进行反馈。授权角色 授权给IMM服务以访问其他云资源（例如OSS）的权限。首次新建项目时，请完成云资源访问授权，操作请参见 云资源访问授权。（可选）云资源访问...
验证分析型查询请求能力
OceanBase 数据库采用了分布式架构，将数据分片存储在不同的节点上，通过数据分片和任务分片实现了数据和计算的并行处理。在OceanBase 中，每个节点都可以独立地执行任务，并且可以通过高速的网络互相通信，实现数据的交互和同步。PARALLEL...
并行查询性能
并行查询利用多核CPU的并行处理能力，以8核32 GB 独享规格 的集群为例，并行查询示意图如下所示。下文将介绍8.0.1和8.0.2版本并行查询参数取值分别设置为如下表所示时，PolarDB 集群负载 并行查询测试方法 与 执行结果。关于如何配置参数，...
深度解析PolarDB数据库并行查询技术
传统的优化器只能生成串行的执行计划，为了实现并行读取数据，同时并行处理数据，首先必须对现有的优化器进行改造，让优化器可以生成需要的并行计划。例如，选择哪个表或哪些表可以并行读取，并且通过并行读取会带来足够的收益；或者哪些...
热点行优化
这样的流水线式的处理方式能够充分利用硬件资源，提升CPU的使用率，提高数据库系统的并行处理能力，从而最大限度地提升数据库系统的吞吐量。消除申请行锁时的等待 为了保证数据的逻辑一致性，对一个数据行进行更新时，首先会对该数据行加锁...
配置数据库代理
开启弹性并行查询（ePQ）能够有效利用多核CPU（集群内空闲计算资源）的并行处理能力，对复杂查询进行加速，详情请参见 弹性并行查询。说明 自2023年4月1日起，集群满足以下条件时会默认开启弹性并行查询，且默认的并行度为2：新创建的集群...
弹性并行查询（ePQ）发布说明
此时，您可以选择开启弹性并行查询（ePQ），系统会根据查询代价自动选择多机并行，突破单节点CPU、内存的资源瓶颈，并借助多节点的IO吞吐能力进一步利用共享存储的高带宽，获得更好的执行效率。弹性计算场景 弹性计算是 PolarDB MySQL版 的...
内核热补丁FAQ
Alibaba Cloud Linux 2系统的ECS实例中断处理释放内存页时由于访问空指针导致系统宕机 Alibaba Cloud Linux 2系统的ECS实例中使用已释放的文件系统inode出现系统宕机如何处理？Alibaba Cloud Linux 2系统的ECS实例OverlayFS的dentry泄露...
产品优势
对比项 X86服务器 手机农场 手机板卡 阿里云（ARM服务器虚拟化）性能 需要进行二进制指令翻译，性能损失大 与真机性能一致 性能不会超过真机 底层基于第三代神龙架构，可提供超越真机的性能 稳定性 开源软件实现，稳定性较差 消费级产品，...
最佳实践
PolarDB PostgreSQL版（兼容Oracle）支持弹性跨机并行查询(elastic Parallel Query，简称ePQ)，能够高效支持轻量级的分析型查询，满足用户日渐需要的HTAP能力。简介 当查询使用ePQ特性时，PolarDB PostgreSQL版（兼容Oracle）将通过ePQ优化...
最佳实践
PolarDB PostgreSQL版（兼容Oracle）支持弹性跨机并行查询(elastic Parallel Query，简称ePQ)，能够高效支持轻量级的分析型查询，满足用户日渐需要的HTAP能力。简介 当查询使用ePQ特性时，PolarDB PostgreSQL版（兼容Oracle）将通过ePQ优化...
最佳实践
PolarDB PostgreSQL版 支持弹性跨机并行查询(elastic Parallel Query，简称ePQ)，能够高效支持轻量级的分析型查询，满足用户日渐需要的HTAP能力。简介 当查询使用ePQ特性时，PolarDB PostgreSQL版 将通过ePQ优化器，生成能够被多个计算节点...
使用多机MPP对海量数据分析提速
判断某条SQL语句是否会通过列存索引的多机并行能力执行 当判断出某条SQL语句可以使用列存索引的并行执行能力后，您可以通过查看某条SQL语句的执行计划来查看是否会使用列存索引的多机并行能力。若执行计划中有 Exchange算子，则表示该SQL...
ECS实例宕机并报错“Out of memory and no killable ...
如果您的ECS实例出现宕机，并且报错日志中存在 Out of memory and no killable processes 信息，则可以参考本文提供的方案解决问题。问题现象 ECS实例在运行过程中出现宕机，并且有类似于如下所示的调用栈：[28663.625353][pid]uid tgid ...
设备和交换机之间的链路故障
本文介绍SAG-1000设备发生设备和交换机之间链路故障的原因和处理方法。问题现象 设备和交换机接口之间ping不通。设备的Web端口配置页，端口前的状态灯为红色。动态路由OSPF接入时，Web端口配置页，端口前的状态灯为红色。设备的Web状态查询...
简介
同一任务的各个实例并行处理各自的输入数据。镜像 Image 镜像（Image）是集群资源创建或者作业运行环境的模板。它是一个标准的或者自定义的 ECS 镜像，需要安装 BatchCompute Agent，然后授权给 BatchCompute 服务使用
设置宕机自动迁移
为了降低物理故障对业务的影响，阿里云为您提供专有宿主机DDH宕机自动迁移的功能。本章节介绍在创建DDH后如何开启或者关闭宕机自动迁移。背景信息 宕机自动迁移开启后，当DDH因故障停机时，会自动迁移至健康的DDH。若您未开启宕机自动迁移...
pg_hint_plan
下面两个示例说明在每张表上执行查询的方式不同：方式一：指定表c1的并行度为3，表c2的并行度为5。EXPLAIN/*+Parallel(c1 3 hard)Parallel(c2 5 hard)*/SELECT c2.a FROM c1 JOIN c2 ON(c1.a=c2.a);返回结果如下：QUERY PLAN-Hash Join...
pg_hint_plan
下面两个示例说明在每张表上执行查询的方式不同：方式一：指定表c1的并行度为3，表c2的并行度为5。EXPLAIN/*+Parallel(c1 3 hard)Parallel(c2 5 hard)*/SELECT c2.a FROM c1 JOIN c2 ON(c1.a=c2.a);返回结果如下：QUERY PLAN-Hash Join...
使用MapReduce处理JindoFS上的数据
Hadoop MapReduce是一个使用简易的软件框架，基于它写出来的应用程序能够运行在由上千个商用机器组成的大型集群上，并以一种可靠容错的方式并行处理上T级别的数据集。一个MapReduce作业通常会把输入的数据集切分为若干独立的数据块，由Map...
对分区表使用跨机并行查询
功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。支持分区表join查询。支持多级分区的并行查询 使用...
对分区表使用跨机并行查询
功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。支持分区表join查询。支持多级分区的并行查询 使用...
概述
结合 PolarDB PostgreSQL版（兼容Oracle）存储计算分离的架构，可以做到弹性扩展：当算力不够时，可以弹性地增加只读节点，新增的只读节点加入分布式的并行计算中，而不需数据重新分片（Reshard）。不会出现数据倾斜问题。使用场景 日常...
概述
结合 PolarDB PostgreSQL版（兼容Oracle）存储计算分离的架构，可以做到弹性扩展：当算力不够时，可以弹性地增加只读节点，新增的只读节点加入分布式的并行计算中，而不需数据重新分片（Reshard）。不会出现数据倾斜问题。使用场景 日常...
扩展性原理
针对这类在线数据库上复杂SQL的处理，PolarDB-X 1.0 额外扩展了单机并行处理器（Symmetric Multi-Processing，简称SMP）和多机并行处理器（DAG）。前者完全集成在 PolarDB-X 1.0 内核中；而对于后者，PolarDB-X 1.0 构建了一个计算集群，...
消息幂等
消息重复的可能原因如下：发送时消息重复 当一条消息已被成功发送到服务端并完成持久化，此时出现了网络闪断或者客户端宕机，导致服务端对客户端应答失败。如果此时Producer意识到消息发送失败并尝试再次发送消息，Consumer后续会收到两条...
快速开始
具体操作请参见 配置数据库代理 的并行查询说明。并行查询推荐设置以及相关说明如下：多机并行引擎可以根据查询代价以及集群实时负载情况自适应弹性调度，建议开启多机并行以获得更优的加速效果。并行度参数从低到高逐渐增加，建议不要超过...
使用跨机并行查询加速索引创建
当使用跨机并行查询功能加速Btree索引构建时，系统会自动构建出一个QC进程完成对基表项的并行扫描，并由索引构建进程接收QC进程扫描结果完成后续的索引创建逻辑。注意事项 当前仅支持简单场景，对普通列类型的索引构建过程，暂不支持...
使用跨机并行查询加速索引创建
当使用跨机并行查询功能加速Btree索引构建时，系统会自动构建出一个QC进程完成对基表项的并行扫描，并由索引构建进程接收QC进程扫描结果完成后续的索引创建逻辑。注意事项 当前仅支持简单场景，对普通列类型的索引构建过程，暂不支持...
跨机并行查询
结合 PolarDB PostgreSQL版（兼容Oracle）存储计算分离的架构，可以做到弹性扩展：当算力不够时，可以弹性地增加只读节点，新增的只读节点加入分布式的并行计算中，而不需数据重新分片（Reshard）。不会出现数据倾斜问题。关于更多跨机并行...
控制台发布记录
下载备份文件 从备份文件恢复到自建MySQL数据库 列存索引多机并行执行 列存索引多机并行是由多个只读列存节点组成的一个多机执行组，并提供多机并行执行能力。适用于以下场景：通过多机并行的资源弹升能力扩展CPU和IOPS，降低查询时延。...
将本地表并行导出至OSS引擎
将本地表并行导出至OSS引擎可以极大地提升数据导出效率。本文介绍了将本地表并行导出至OSS引擎的相关内容。使用限制 PolarDB MySQL版 集群的产品版本需为 企业版，集群版本需为8.0.1版本且修订版本为8.0.1.1.38及以上。仅支持并行导出单表...
多级分区表静态裁剪与并行扫描
PX Worker：参与ePQ跨机并行查询的工作进程角色。Worker ID：唯一标识一个PX Worker的编号。原理介绍 在多级分区表中，每一级分区表的分区维度可以不同，如下图所示：例如，一级分区表按照时间（date）维度分区，二级分区表按照地域...
概览
V2.0.14.6.0 计算节点范围选择与并行度控制 V2.0.14.6.0 ePQ Hint Injection V2.0.14.8.0 ePQ支持分区表查询 V2.0.14.11.0 自适应扫描 ❌ 并行INSERT V2.0.14.12.0 创建物化视图的跨机并行加速和批量写入 V2.0.14.6.0 ePQ支持并行写入及...
概览
V1.1.17 V14.8.11.0 自适应扫描 V1.1.17 ❌ 并行INSERT V1.1.17 V14.8.12.0 创建物化视图的跨机并行加速和批量写入 V1.1.30 V14.6.6.0 ePQ支持并行写入及查询OSS外部表 V1.1.35 V14.9.13.0 根据表大小或代价控制是否使用ePQ ❌ V14.9.15.0 ...
2023年
创建物化视图的跨机并行加速和批量写入 2023年3月 弹性跨机并行查询功能，支持多个计算节点分布式地执行SQL查询，加速 PolarDB PostgreSQL版 的分析型查询性能。弹性跨机并行查询（ePQ）2023年3月 云数据库ACL安全升级。账号权限 2023年3月...
- 产品推荐
- 这些文档可能帮助您