混合负载HTAP的实践和优化

OLTP系统查询慢,存在分析型场景和瓶颈的客户;读写分离需求。PolarDB-X HTAP架构更多信息,请参见 混合负载HTAP。HTAP集群 您购买的 PolarDB-X 主实例,主要面向在线通用业务场景。如果业务针对同一份数据有分析、专注离线拖数、跑批等...

2022年

ST_ImportFrom 2022年9月 S​T_ExportTo函数 支持栅格数据导出到HDFS文件系统。ST_ExportTo 2022年9月 缺陷修复 修复 ST_makeTrajectory 函数可能会崩溃的问题。2022年9月 修复 ST_lcsSimilarity 函数无法识别以天为单位的时间段问题。2022...

计算资源优化

系统在持续增加适用于云场景的新特性的同时,持续改进内核性能并修复重大缺陷,并且提供针对ECS实例环境定制优化的内核启动参数和系统配置参数 开机启动速度:针对ECS实例环境大幅优化启动速度,在实际测试中,相比其他操作系统约减少60%的...

在云桌面内挂载CPFS文件系统

背景信息 文件存储CPFS(Cloud Paralleled File System)是阿里云推出的全托管、可扩展并行文件系统,满足AI训练、自动驾驶、工业仿真等高性能计算场景的需求。更多信息,请参见 什么是文件存储CPFS。文件存储CPFS提供NFS协议服务,通过...

在Linux云电脑挂载CPFS文件系统

背景信息 文件存储CPFS(Cloud Paralleled File System)是阿里云推出的全托管、可扩展并行文件系统,满足AI训练、自动驾驶、工业仿真等高性能计算场景的需求。详细信息,请参见 什么是文件存储CPFS。CPFS提供NFS协议服务,通过CPFS-NFS...

什么是无影云电脑个人版

您可以在云电脑卡片上执行关机、开机、重启、设置等操作。关于购买云电脑的详细方法说明,请参见 用户指南。Android/iOS客户端 您可以在无影的Android或iOS客户端内直接购买个人云电脑。在应用商店内搜索并获取无影云电脑App。说明 如果您...

基础管理FAQ

如果还开启了自动挂载配置,您还需要删除或修改自动挂载,取消开机自动挂载文件系统。具体操作,请参见 通过NAS控制台卸载挂载目录、通过执行命令卸载挂载目录 和 删除文件系统。说明 重启服务器请在业务允许重启时进行重启操作。NAS被释放...

创建RAID阵列(Linux)

级别 优势 劣势 适用场景 RAID 0(条带)提供了数据条带化和并行读/写操作,从而提高了性能。说明 RAID条带化是指将数据分成固定大小的块(条带),然后将这些块依次分配到不同的磁盘驱动器上。没有冗余功能,如果其中一块云盘出现故障,...

概述

跨机并行查询可以通过系统粒度、会话粒度和查询粒度进行分析型查询,具体可参见 使用跨机并行查询进行分析型查询。PolarDB PostgreSQL版(兼容Oracle)支持对分区表使用跨机并行查询的功能,提升数据库性能,具体可参见 对分区表使用跨机...

概述

跨机并行查询可以通过系统粒度、会话粒度和查询粒度进行分析型查询,具体可参见 使用跨机并行查询进行分析型查询。PolarDB PostgreSQL版(兼容Oracle)支持对分区表使用跨机并行查询的功能,提升数据库性能,具体可参见 对分区表使用跨机...

启动实例

按量付费实例结清欠费账单后,系统会自动重开机。自动重开机偶尔会出现失败的情况,请您关注自动重开机是否成功,实例在约10分钟内是否进入了 运行中 状态,如果自动重开机失败则及时手动重开机(即手动启动实例)。重要 欠费停机的按量...

启动实例

按量付费实例结清欠费账单后,系统会自动重开机。自动重开机偶尔会出现失败的情况,请您关注自动重开机是否成功,实例在约10分钟内是否进入了 运行中 状态,如果自动重开机失败则及时手动重开机(即手动启动实例)。重要 欠费停机的按量...

启动实例

按量付费实例结清欠费账单后,系统会自动重开机。自动重开机偶尔会出现失败的情况,请您关注自动重开机是否成功,实例在约10分钟内是否进入了 运行中 状态,如果自动重开机失败则及时手动重开机(即手动启动实例)。重要 欠费停机的按量...

使用跨机并行查询进行分析型查询

细粒度使用跨机并行查询 各个粒度下如何使用跨机并行查询进行分析型查询如下所示:系统粒度控制 系统粒度控制主要通过设置全局guc参数控制开启跨机并行查询,指定并行度。示例 postgres=alter system set polar_enable_px=1;ALTER SYSTEM ...

使用跨机并行查询进行分析型查询

细粒度使用跨机并行查询 各个粒度下如何使用跨机并行查询进行分析型查询如下所示:系统粒度控制 系统粒度控制主要通过设置全局guc参数控制开启跨机并行查询,指定并行度。示例 postgres=alter system set polar_enable_px=1;ALTER SYSTEM ...

并行查询性能

本文档基于TPC-H测试 PolarDB MySQL版 8.0.1和8.0.2版本 集群版 的OLAP负载性能,您可以按照本文介绍自行测试对比,快速了解数据库系统的性能。并行查询简介 PolarDB MySQL版 8.0版本 集群版 推出并行查询(Parallel Query)框架。当您的...

软件概述

MPICH 3.2 WRF-OpenMPI 3.8.1 用于气象研究和天气预测的大气模型系统,多节点并行版本。OpenMPI 1.10.7 性能测试软件 名称 版本 简介 需要选中的依赖包 LINPACK 2018 浮点性能评测工具。Intel-MPI 2018 STREAM 2018 访存带宽评测工具。无 ...

Catalog概述

当FE将生成的查询计划分发给各个BE后,各个BE会并行扫描Hive存储系统中的目标数据,并执行计算返回查询结果。查询数据 查询内部数据 如果需要查询存储在StarRocks中的数据,请参见 Default Catalog。查询外部数据 如果需要查询存储在外部...

Catalog概述

当FE将生成的查询计划分发给各个BE后,各个BE会并行扫描Hive存储系统中的目标数据,并执行计算返回查询结果。查询数据 查询内部数据 如果需要查询存储在StarRocks中的数据,请参见 内表数据源。查询外部数据 如果需要查询存储在外部数据源...

通过执行命令卸载挂载目录

如果您为NFS或SMB文件系统配置了自动挂载脚本且需要重启服务器,您还需要删除或修改自动挂载配置文件/etc/fstab,取消开机自动挂载文件系统。执行 mount-l 命令,查看卸载结果。如果回显中未找到您挂载的NAS文件系统信息,则表示该文件系统...

客户案例

然而大数据的并行查询不能拖垮系统中的高优先级的小请求,并且当 MySQL 单表数据规模超过 2000 万时,其查询性能就出现断崖式的下跌,这也是业务无法容忍的一大缺陷,因此,我们在系统选型上更倾向于 OceanBase 这样具有高吞吐,数据读写...

配置作业部署信息

两次系统检查点间最短间隔 两次系统检查点之间的最短时间间隔,如果系统检查点最大并行度是1,则该配置确保两个系统检查点之间有一个最短时间间隔。State数据过期时间 如果时间超过了State数据过期时间,则State数据就过期了,系统就会自动...

多台ECS实例批量挂载同一NAS文件系统

如果您的业务场景需要多台ECS实例共享同一NAS文件系统中的数据,您可以通过云助手仅执行一次操作,实现多台ECS实例批量挂载同一NAS文件系统。前提条件 已创建文件系统。具体操作,请参见 创建文件系统。网络环境 当您的业务的网络符合或...

并行DDL

说明 该参数取值为1的时候,系统默认开启2个并行线程数。innodb_parallel_build_primary_index 您可以通过如下 innodb_parallel_build_primary_index 参数控制允许创建主键索引时使用并行DDL功能:说明 该参数当前处于灰度发布阶段。如有...

2021年

使用跨机并行查询加速索引创建 支持从三种粒度指定跨机并行查询的范围:系统粒度:指定所有session所有查询是否开启跨机并行查询。会话粒度:指定当前session是否开启跨机并行查询。查询粒度:指定具体查询是否开启跨机并行查询。使用跨机...

PolarDB HTAP实时数据分析技术解密

如果确定启用并行执行,则会参考一系列状态数据决定并行度,包括当前系统可用的CPU、Memory、IO资源、目前已经调度和在排队的任务信息、统计信息、query 的复杂程度以及用户可配置的参数等。根据这些数据计算出一个推荐的DOP值给算子,而算...

功能概览

如果安装了多个客户端,就可以并行对大规模文件系统数据进行备份,提升备份性能。云备份采用永久增量备份机制,除首次全量备份外,后续每次备份仅上传与上一次备份相比的变化数据,在云上合成完整的全量备份,以最大程度缩减网络和存储消耗...

ECS系统事件汇总

系统维护实例停止已完成 Instance:SystemMaintenance.Stop:Avoided:因系统维护实例停止已规避 Instance:SystemMaintenance.Stop:Failed:因系统维护实例停止失败 Instance:SystemMaintenance.Stop:Canceled:因系统维护实例停止已取消 ...

挂载访问FAQ

如何解决服务器开机自启动挂载NFS文件系统失败?挂载NFS文件系统时,返回mount:can't find/root/nas in/etc/fstab该如何处理?如何解决在NFS文件系统中创建文件延迟问题?如何解决向NFS文件系统中写入数据延迟问题?Windows挂载SMB文件系统...

弹性并行查询(Elastic Parallel Query)常见问题

系统默认不在主节点上开启并行查询,如果业务可以确保写业务量较低或写入吞吐要求不高,则也可以在主节点上开启并行查询,并且需要设置并行度和 parallel_degree_policy 参数为 AUTO 或 TYPICAL。开启并行查询并打开innodb_adaptive_hash_...

弹性并行查询(ePQ)发布说明

此时,您可以选择开启弹性并行查询(ePQ),系统会根据查询代价自动选择多机并行,突破单节点CPU、内存的资源瓶颈,并借助多节点的IO吞吐能力进一步利用共享存储的高带宽,获得更好的执行效率。弹性计算场景 弹性计算是 PolarDB MySQL版 的...

PolarDB MySQL版8.0.2版本发布日志

即开启弹性并行查询功能后,当系统的 loose_csv_max_oss_threads 参数值大于1时,直接进行并行查询。优化OSS外表文件格式错误的报错信息内容。支持读取OSS上的ORC格式的数据,以及将ORC格式的数据写入OSS。优化拼写错误的报错信息内容。...

计算资源

计算资源常指用于执行计算任务的软硬件资源,包括CPU、GPU、内存、操作系统和特定计算任务的软硬件环境等。计算资源的主要作用是执行各种计算任务,包括数据处理、算法运算、业务逻辑执行等。计算资源的性能和容量直接影响到系统的计算能力...

PolarDB处理TPC-H查询的挑战和机遇

如果您从事查询优化和执行的工作,即使是使用OLTP(在线交易)型的数据库系统,也会和TPC-H打上交道。TPC-H是用来评估在线分析处理的基准程序,主要模拟了一个供应商和采购商之间的交易行为,其中包含针对8张表的22条分析型查询。说明 该...

未来规划

传统数据库架构依赖于高端硬件,每套数据库系统服务器少,架构相对简单,但无法支持新业务的扩展需求。云计算架构的核心逻辑就是通过虚拟化技术带来池化资源,云原生数据库采用分布式数据库架构,实现大规模扩展,每套数据库系统横跨多台...

更换操作系统系统盘)

(条件必选)如果更换操作系统前后都是Linux系统且数据盘设置了开机自动挂载分区。则切换操作系统后,数据盘分区挂载信息会丢失,需要更新/etc/fstab 配置。具体操作,请参见 在fstab文件中配置UUID方式自动挂载数据盘。相关操作 更换操作...

更换操作系统系统盘)

(条件必选)如果更换操作系统前后都是Linux系统且数据盘设置了开机自动挂载分区。则切换操作系统后,数据盘分区挂载信息会丢失,需要更新/etc/fstab 配置。具体操作,请参见 在fstab文件中配置UUID方式自动挂载数据盘。相关操作 更换操作...

初始化小于等于2 TiB数据盘(Linux)

一块全新的数据盘挂载到ECS实例后,还不能直接存储数据,通常您需要在数据盘进行分区、文件系统格式化、挂载文件系统等初始化操作后,才能供系统读写数据。本文介绍如何在Linux系统中初始化一块小于等于2 TiB的数据盘。前提条件 数据盘已...

社区镜像

优化了系统启动时间,缩短了开机等待时间。降低了系统资源占用率,提高了整体性能表现。安全增强 说明针对潜在安全风险或漏洞所做的补丁和改进措施。升级了内核版本,修复了已知的安全漏洞。强化了身份验证和权限管理,提高了系统的安全性...

并行查询

系统会通过当前并发数、Segment配置和SQL信息,自动选择并行度,在检测到当前系统负载较大时会关闭并行查询。说明 请确保您的实例内核小版本为6.3.4.0及以上版本,如何升级小版本,请参见 版本升级。并行查询适用于4核及以上规格的实例。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
批量计算 负载均衡 云工作流 云安全中心 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用