如何收集操作系统宕机后的内核转储信息?
背景信息 阿里云技术支持人员可以通过在转储文件中找到对应的信息，从而分析操作系统宕机的原因，并同步给用户。说明 您也可以通过Windows平台的 WinDbg 工具和Linux平台的 crash 工具来检查操作系统内核的转储文件。Linux实例 远程连接ECS...
Windows系统实例的宕机问题排查
定位宕机原因 您可以通过以下方式，定位ECS实例发生宕机的具体原因。方式一：（推荐）通过自助诊断工具定位 登录 ECS管理控制台，左侧导航栏单击 自助问题排查。单击 实例问题排查 页签。选择 实例无法连接或启动异常>实例出现宕机，然后...
Linux系统实例的宕机问题排查
定位宕机原因 您可以通过以下方式，定位发生宕机的具体原因。方式一：（推荐）通过自助诊断工具定位 登录 ECS管理控制台，左侧导航栏单击 自助问题排查。单击 实例问题排查 页签。选择 实例无法连接或启动异常>实例出现宕机，然后选择出现...
控制台发布记录
下载备份文件 从备份文件恢复到自建MySQL数据库 列存索引多机并行执行 列存索引多机并行是由多个只读列存节点组成的一个多机执行组，并提供多机并行执行能力。适用于以下场景：通过多机并行的资源弹升能力扩展CPU和IOPS，降低查询时延。...
概述
功能简介 弹性并行查询（Elastic Parallel Query，ePQ）目前支持单机并行和多机并行两种并行引擎，单机并行引擎等效于原有的并行查询，多机并行引擎支持集群内跨节点的自适应弹性调度。PolarDB MySQL版 8.0.1版本支持单机并行查询，查询时...
并行资源控制策略配置
自适应调整并行度 支持根据查询代价以及当前资源负载选择合适的并行度，包含单机并行的并行度选择和多机并行的弹性调度策略，主要相关配置参数介绍如下：参数 级别 说明 parallel_degree_policy Global 设置单个查询的并行度配置策略，取值...
弹性并行查询（ePQ）发布说明
此时，您可以选择开启弹性并行查询（ePQ），系统会根据查询代价自动选择多机并行，突破单节点CPU、内存的资源瓶颈，并借助多节点的IO吞吐能力进一步利用共享存储的高带宽，获得更好的执行效率。弹性计算场景 弹性计算是 PolarDB MySQL版 的...
主机选项说明
开启会话备注 登录主机时需要写明登录主机的原因或目的才可登录，便于事后审计。开启历史会话审计 表示允许堡垒机对运维会话内容进行审计，关闭后会产生会话记录，但没有具体内容。开启实时会话监控 表示管理员可以对主机进行实时监控，...
最佳实践
PolarDB PostgreSQL版（兼容Oracle）支持弹性跨机并行查询(elastic Parallel Query，简称ePQ)，能够高效支持轻量级的分析型查询，满足用户日渐需要的HTAP能力。简介 当查询使用ePQ特性时，PolarDB PostgreSQL版（兼容Oracle）将通过ePQ优化...
最佳实践
PolarDB PostgreSQL版 支持弹性跨机并行查询(elastic Parallel Query，简称ePQ)，能够高效支持轻量级的分析型查询，满足用户日渐需要的HTAP能力。简介 当查询使用ePQ特性时，PolarDB PostgreSQL版 将通过ePQ优化器，生成能够被多个计算节点...
产品规格
通用型+低延时网络 ecs.sccg5.24xlarge 处理器：2.5 GHz主频的Intel ® Xeon ® Gold 6149（Skylake）vCPU：96 内存：384GiB GPU：无 以太网：10Gbit/s RDMA：50Gbit/s 高效云盘 SSD云盘 需要多机并行的业务，如仿真制造场景。不支持ESSD云...
计算层变量
MERGE_CONCURRENT 否 FALSE[TRUE|FALSE]全并行执行开关，主要影响DDL和全下推简单查询的并行执行度。MERGE_UNION 否 FALSE[TRUE|FALSE]默认关闭，打开意味着物理SQL不做union优化，且将串行执行下推的物理SQL。MERGE_UNION_SIZE 否-1[0-...
ECS实例宕机并报错“Out of memory and no killable ...
如果您的ECS实例出现宕机，并且报错日志中存在 Out of memory and no killable processes 信息，则可以参考本文提供的方案解决问题。问题现象 ECS实例在运行过程中出现宕机，并且有类似于如下所示的调用栈：[28663.625353][pid]uid tgid ...
对分区表使用跨机并行查询
功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。支持分区表join查询。支持多级分区的并行查询 使用...
对分区表使用跨机并行查询
功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。支持分区表join查询。支持多级分区的并行查询 使用...
设置宕机自动迁移
为了降低物理故障对业务的影响，阿里云为您提供专有宿主机DDH宕机自动迁移的功能。本章节介绍在创建DDH后如何开启或者关闭宕机自动迁移。背景信息 宕机自动迁移开启后，当DDH因故障停机时，会自动迁移至健康的DDH。若您未开启宕机自动迁移...
概述
结合 PolarDB PostgreSQL版（兼容Oracle）存储计算分离的架构，可以做到弹性扩展：当算力不够时，可以弹性地增加只读节点，新增的只读节点加入分布式的并行计算中，而不需数据重新分片（Reshard）。不会出现数据倾斜问题。使用场景 日常...
概述
结合 PolarDB PostgreSQL版（兼容Oracle）存储计算分离的架构，可以做到弹性扩展：当算力不够时，可以弹性地增加只读节点，新增的只读节点加入分布式的并行计算中，而不需数据重新分片（Reshard）。不会出现数据倾斜问题。使用场景 日常...
快速开始
具体操作请参见 配置数据库代理 的并行查询说明。并行查询推荐设置以及相关说明如下：多机并行引擎可以根据查询代价以及集群实时负载情况自适应弹性调度，建议开启多机并行以获得更优的加速效果。并行度参数从低到高逐渐增加，建议不要超过...
跨机并行查询
结合 PolarDB PostgreSQL版（兼容Oracle）存储计算分离的架构，可以做到弹性扩展：当算力不够时，可以弹性地增加只读节点，新增的只读节点加入分布式的并行计算中，而不需数据重新分片（Reshard）。不会出现数据倾斜问题。关于更多跨机并行...
使用跨机并行查询进行分析型查询
polar_px_dop_per_node 设置当前会话并行查询的并行度，默认为1，推荐值为当前CPU总核数。若设置该参数为N，则一个会话在每个节点上将会启用N个px workers进程，用于处理当前的跨机并行查询逻辑。px_workers 指定跨机并行查询是否对特定表...
使用跨机并行查询进行分析型查询
polar_px_dop_per_node 设置当前会话并行查询的并行度，默认为1，推荐值为当前CPU总核数。若设置该参数为N，则一个会话在每个节点上将会启用N个px workers进程，用于处理当前的跨机并行查询逻辑。px_workers 指定跨机并行查询是否对特定表...
使用跨机并行查询加速索引创建
当使用跨机并行查询功能加速Btree索引构建时，系统会自动构建出一个QC进程完成对基表项的并行扫描，并由索引构建进程接收QC进程扫描结果完成后续的索引创建逻辑。注意事项 当前仅支持简单场景，对普通列类型的索引构建过程，暂不支持...
使用跨机并行查询加速索引创建
当使用跨机并行查询功能加速Btree索引构建时，系统会自动构建出一个QC进程完成对基表项的并行扫描，并由索引构建进程接收QC进程扫描结果完成后续的索引创建逻辑。注意事项 当前仅支持简单场景，对普通列类型的索引构建过程，暂不支持...
将本地表并行导出至OSS引擎
79 B","estimate_single_worker_outfile_size":"8 KB","cause":"The data written by each worker should be greater than 1024 KB(pq_oss_min_worker_write_size)."} } ``` 您可以在执行结果的 cause 参数值中查看不能并行导出的原因。...
PolarDB并行查询
串行优化流程中做针对并行执行的补强，例如修正table扫描方式等，这也是上面性能数据中Q6/Q12会有超线性加速比的原因。全算子统计信息推导+代价计算，补充了一系列的cost formula和cardinality estimation推导机制。自适应执行策略 在早期...
创建物化视图的跨机并行加速和批量写入
本文介绍创建物化视图的跨机并行加速和批量写入功能。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.6.6.0及以上）PostgreSQL 11（内核小版本1.1.30及以上）说明 您可通过如下语句查看 PolarDB ...
概览
V1.1.17 V14.8.11.0 自适应扫描 V1.1.17 ❌ 并行INSERT V1.1.17 V14.8.12.0 创建物化视图的跨机并行加速和批量写入 V1.1.30 V14.6.6.0 ePQ支持并行写入及查询OSS外部表 V1.1.35 V14.9.13.0 根据表大小或代价控制是否使用ePQ ❌ V14.9.15.0 ...
2023年
创建物化视图的跨机并行加速和批量写入 2023年3月 弹性跨机并行查询功能，支持多个计算节点分布式地执行SQL查询，加速 PolarDB PostgreSQL版 的分析型查询性能。弹性跨机并行查询（ePQ）2023年3月 云数据库ACL安全升级。账号权限 2023年3月...
创建倍速转码任务
针对带有视频流转码的任务，媒体处理MPS基于智能转码引擎和强大的云上资源调度能力，通过将视频源切分为多个较小的片段，使用多台转码机并行转码的方式提升视频流转码效率，显著缩短处理耗时。实现原理如下图：功能特性 类型 说明 加速倍数...
ePQ支持分区表查询
ePQ不仅能够对普通表进行高效的跨机并行查询，对分区表也实现了跨机并行查询。ePQ对分区表支持的基础功能如下：对分区策略为Range/List/Hash的分区表进行并行扫描。对分区表进行索引扫描。对分区表进行连接查询。此外，ePQ还支持了部分与...
混合负载HTAP的实践和优化
多机并行（MPP）：您若购买了只读实例，针对AP负载的查询，可以协调只读实例上多个节点的多核做分布式多机并行加速。为了让您可以准确知道执行模式，我们在原有 EXPLAIN 指令上，扩展出了 EXPLAIN PHYSICAL。例如以下查询，通过指令可以...
LightGBM算法
LightGBM可以减少数据对内存的使用、减少通信代价以及提升多机并行时的效率，在数据计算上实现线性加速。使用场景 LightGBM是一个算法框架，包括GBDT模型、随机森林和逻辑回归等模型。通常应用于二分类、多分类和排序等场景。例如：在个性...
并行安全性
规划器把查询中涉及的操作分类成 并行安全、并行受限 或者 并行不安全。...在一些情况中，可以（甚至效率更高）把对表的扫描包括在查询的并行部分并且延迟对 WHERE 子句的计算，这样它会出现在 Gather 节点之上。不过，规划器不会这样做。
内核热补丁FAQ
Alibaba Cloud Linux 2系统的ECS实例中断处理释放内存页时由于访问空指针导致系统宕机 Alibaba Cloud Linux 2系统的ECS实例中使用已释放的文件系统inode出现系统宕机如何处理？Alibaba Cloud Linux 2系统的ECS实例OverlayFS的dentry泄露...
PolarDB PostgreSQL（兼容Oracle）2.0版本商业化公告
例如，PL/pgSQL函数内的 RETURN QUERY 返回结果时支持QUERY的并行计算，REFRESH MATERIALIZED VIEW 命令也可以使用并行查询。此外，支持并行顺序扫描chunk，提高大范围数据扫描的IO吞吐，使其接近块设备的IO吞吐极限。索引增强 PolarDB ...
PolarDB PostgreSQL（兼容Oracle）2.0版本与1.0版本...
例如，PL/pgSQL函数内的 RETURN QUERY 返回结果时支持QUERY的并行计算，REFRESH MATERIALIZED VIEW 命令也可以使用并行查询。此外，支持并行顺序扫描chunk，提高大范围数据扫描的IO吞吐，使其接近块设备的IO吞吐极限。索引增强 PolarDB ...
使用多机MPP对海量数据分析提速
判断某条SQL语句是否会通过列存索引的多机并行能力执行 当判断出某条SQL语句可以使用列存索引的并行执行能力后，您可以通过查看某条SQL语句的执行计划来查看是否会使用列存索引的多机并行能力。若执行计划中有 Exchange算子，则表示该SQL...
主备方案介绍
故障自动容错原理：单机宕机和集群宕机测试结果如下。以下是单机宕机吞吐对比图和单机宕机平均响应对比图。以下是集群宕机吞吐对比图和集群宕机平均响应对比图。主备容灾原理介绍 当云数据库HBase实例因不可预料的原因（例如设备故障、机房...
DescribeDedicatedHosts-查询专有宿主机详细信息
ddh.g5 LockReason string 否 专有宿主机被锁定的原因。取值范围：financial：因欠费被锁定。security：因安全原因被锁定。financial PageNumber integer 否 响应信息的页码数。默认值：1。1 PageSize integer 否 响应信息的每页行数。最大...
- 产品推荐
- 这些文档可能帮助您