性能调优

DLA是分布式计算系统,系统对每个Tablestore表按照一定的规则进行分片(split),各个分片之间相互不重合,计算并行执行这些分片,从而提高计算并行度。指定单个分片的大小 通过 ots-split-unit-mb=<分片值>指定单个分片的大小,分片值的...

未来规划

如何对海量数据进行在线分析和计算,支持实时在线交互式分析,需要做并行处理(DSP 模型、MPP 模型等等),对并行调度计算进行优化。系统能力提升:智能化+安全(使用方便可靠、运维简易)。如在管控平台的层面如何做智能化的调度、监控...

产品优势

本文介绍云原生关系型数据库 PolarDB PostgreSQL版(兼容Oracle)的...跨机并行查询 支持跨机并行查询计算引擎,多个节点跨机并行执行SQL,充分发挥所有计算节点的CPU、内存、网络的硬件资源,加速 分析型查询性能。具体可参见 跨机并行查询。

基本介绍

基本知识 流程定义语言FDL(Flow Definition Language)用来描述和定义业务逻辑,在执行流程时,Serverless 工作流 服务会根据流程定义依次执行相关步骤。在FDL中,一个流程(Flow)通常包含若干步骤(Step),这些步骤可以是简单的原子...

验证分析型查询请求能力

OceanBase 数据库采用了分布式架构,将数据分片存储在不同的节点上,通过数据分片和任务分片实现了数据和计算并行处理。在OceanBase 中,每个节点都可以独立地执行任务,并且可以通过高速的网络互相通信,实现数据的交互和同步。PARALLEL...

什么是GPU云服务器

GPU云服务器提供了GPU加速计算能力,实现GPU计算资源的即开即和弹性伸缩。其作为阿里云弹性计算家族的一员,结合了GPU计算力与CPU计算力,满足您在人工智能、高性能计算、专业图形图像处理等场景中的需求,例如,在并行运算方面,使用GPU...

并行(Parallel)

基本概念 并行状态用来并行执行多个状态。它定义了多个分支(Branches),每个分支包含一系列状态。执行并行状态会并发执行所有分支包含的状态。当所有分支执行结束后,默认将输出一个包含所有分支结果的map[string]any,然后可以通过输出...

应用场景

本文介绍函数计算的典型应用场景,包括Web应用、数据ETL处理、AI推理、视频转码等。Web应用 函数计算和其他云产品搭配使用,可以让工程师只需编写业务代码即能够快速构建可弹性扩展的Web应用。同时这些程序可在多个数据中心高可用运行,不...

应用场景

本文介绍函数计算的典型应用场景,包括Web应用、数据ETL处理、AI推理、视频转码等。Web应用 函数计算和其他云产品搭配使用,可以让工程师只需编写业务代码即能够快速构建可弹性扩展的Web应用。同时这些程序可在多个数据中心高可用运行,不...

MaxFrame概述

MaxFrame是由阿里云自研的分布式计算框架,支持Python编程接口、兼容Pandas接口且自动进行分布式计算,同时可直接使用MaxCompute计算资源及数据接口,与MaxCompute Notebook、镜像管理等功能共同构成了MaxCompute完整的Python开发生态。...

云数据库RDS MySQL版

如果数据库能支持的最大并发连接比较小,可适当减小连接池大小或者减小作业节点并行度。维表独有 参数 说明 数据类型 是否必填 默认值 备注 cache 维表缓存策略。String 否 在Flink计算引擎VVR 4.0.6之前版本,缓存策略默认值为NONE。在...

概述

In[3]:df=md.DataFrame([[1,None],[None,1]])In[4]:df.execute()Out[4]:0 1 0 1.0 NaN 1 NaN 1.0 In[5]:df.ffill().execute()#空值上一行的值。Out[5]:0 1 0 1.0 NaN 1 1.0 1.0 PyODPS PyODPS使用MaxCompute计算和存储数据,而MaxCompute...

将本地表并行导出至OSS引擎

将本地表并行导出至OSS引擎可以极大地提升数据导出效率。本文介绍了将本地表并行导出至OSS引擎的相关内容。使用限制 PolarDB MySQL版 集群的产品版本需为 企业版,集群版本需为8.0.1版本且修订版本为8.0.1.1.38及以上。仅支持并行导出单表...

名词解释

视图计算产品涉及词汇说明 名词 说明 FLV FLV 是FLASH VIDEO的简称,FLV流媒体格式是随着Flash MX的推出发展而的视频格式。由于它形成的文件极小、加载速度极快,使得网络观看视频文件成为可能,它的出现有效地解决了视频文件导入Flash后...

授权信息

操作 API 访问级别 资源类型 条件关键字 关联操作 暂无数据 资源(Resource)下表是 函数计算(FC)定义的资源,这些资源可以在RAM权限策略语句的 Resource 元素中使用,用来授予对该资源执行具体操作的权限。其中,资源ARN是资源在阿里云...

授权信息

操作 API 访问级别 资源类型 条件关键字 关联操作 暂无数据 资源(Resource)下表是 函数计算(FC)(FC-Open)定义的资源,这些资源可以在RAM权限策略语句的 Resource 元素中使用,用来授予对该资源执行具体操作的权限。其中,资源ARN是...

授权信息

操作 API 访问级别 资源类型 条件关键字 关联操作 暂无数据 资源(Resource)下表是 实时计算 Flink版(RealtimeCompute)定义的资源,这些资源可以在RAM权限策略语句的 Resource 元素中使用,用来授予对该资源执行具体操作的权限。...

授权信息

操作 API 访问级别 资源类型 条件关键字 关联操作 暂无数据 资源(Resource)下表是 实时计算 Flink版(RealtimeCompute)定义的资源,这些资源可以在RAM权限策略语句的 Resource 元素中使用,用来授予对该资源执行具体操作的权限。...

授权信息

操作(Action)下表是 云原生大数据计算服务 MaxCompute(MaxCompute)定义的操作,这些操作可以在RAM权限策略语句的 Action 元素中使用,用来授予执行该操作的权限。下面对表中的具体项提供说明:操作:是指具体的权限点。API:是指操作...

概述

在流数据分析中,数据存储源表、维表、结果表表示。但由于运行环境不一样,边缘端与云端支持的数据存储大部分是不相同的。类型 描述 源表 流式数据存储,驱动流数据分析的运行。每个流数据分析任务必须提供至少一个流式数据存储。边缘...

查询执行器介绍

并行查询 并行查询(Parallel Query)指利用多线程并行执行用户的复杂查询。说明 该功能仅在 PolarDB-X 1.0 标准版及企业版上提供,入门版由于硬件规格限制,不提供该项功能。并行查询的执行计划相比原来有所改动。例如,还是以上面的查询...

授权信息

操作(Action)下表是 弹性加速计算实例(EAIS)定义的操作,这些操作可以在RAM权限策略语句的 Action 元素中使用,用来授予执行该操作的权限。下面对表中的具体项提供说明:操作:是指具体的权限点。API:是指操作对应的API接口。访问级别...

授权信息

操作(Action)下表是 弹性加速计算实例(EAIS)定义的操作,这些操作可以在RAM权限策略语句的 Action 元素中使用,用来授予执行该操作的权限。下面对表中的具体项提供说明:操作:是指具体的权限点。API:是指操作对应的API接口。访问级别...

使用场景

何时会用到并行查询 有几种设置会导致查询规划器在任何情况下都不生成并行查询计划。为了让并行查询计划能够被生成,必须配置好下列设置。max_parallel_workers_per_gather 必须被设置为大于零的值。这是一种特殊情况,更加普遍的原则是...

自适应扫描

简介 PolarDB PostgreSQL版 支持ePQ特性,通过利用集群中多个节点的计算能力,实现跨节点的并行查询功能。ePQ可以支持顺序扫描、索引扫描等多种物理算子的跨节点并行化。其中,对顺序扫描算子,ePQ提供了两种扫描模式,分别为自适应扫描...

自适应扫描

简介 支持ePQ特性,通过利用集群中多个节点的计算能力,实现跨节点的并行查询功能。ePQ可以支持顺序扫描、索引扫描等多种物理算子的跨节点并行化。其中,对顺序扫描算子,ePQ提供了两种扫描模式,分别为自适应扫描模式和非自适应扫描模式...

并行INSERT

简介 支持弹性跨机并行查询(ePQ)特性,通过利用集群中多个计算节点提升查询性能。同时,ePQ也支持在读写节点上通过多进程并行写入,实现对 INSERT 语句的加速。ePQ的并行 INSERT 功能用于加速 INSERT INTO.SELECT.这种读写兼备的SQL。...

深度解析PolarDB数据库并行查询技术

本文主要介绍基于代价进行并行优化、并行执行的云数据库的并行查询引擎的关键问题和核心技术。背景信息 随着数据规模的不断扩大,用户SQL的执行时间越来越长,这不仅对数据库的优化能力提出更高的要求,并且对数据库的执行模式也提出了新的...

并行INSERT

简介 PolarDB PostgreSQL版 支持弹性跨机并行查询(ePQ)特性,通过利用集群中多个计算节点提升查询性能。同时,ePQ也支持在读写节点上通过多进程并行写入,实现对 INSERT 语句的加速。ePQ的并行 INSERT 功能用于加速 INSERT INTO.SELECT...

AI加速概述

PAI-AI加速器主要用于训练加速和推理加速,它通过数据集加速、计算加速、优化算法、调度算法和资源优化技术等多种手段,提高了AI训练和推理的速度、易用性和稳定性,全面提升了AI计算的效率。本文为您介绍AI加速器的功能亮点。AI加速器功能...

PolarDB PostgreSQL版:ePQ架构详解

PolarDB PostgreSQL版 实现了弹性跨机并行查询(ePQ)特性,能够帮助您解决原先的 PolarDB PostgreSQL版 在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版 的版本如下:PostgreSQL 11(内核小版本1.1.28及以上)...

PolarDB PostgreSQL版:ePQ架构详解

PolarDB PostgreSQL版(兼容Oracle)实现了弹性跨机并行查询(ePQ)特性,能够帮助您解决原先的 PolarDB PostgreSQL版(兼容Oracle)在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版(兼容Oracle)的版本如下:...

产品概述

云原生数据仓库 AnalyticDB PostgreSQL 版 是一种大规模并行处理(MPP)数据仓库服务,可提供海量数据在线分析服务。云原生数据仓库 AnalyticDB PostgreSQL 版 基于开源项目Greenplum构建,由阿里云深度扩展,兼容ANSI SQL 2003,兼容...

PolarDB MySQL版8.0.2版本发布日志

支持使用 并行DDL 来并行创建全局二级索引。支持在已创建全局二级索引的分区表上使用 秒级加字段 功能。Hint Plan新增Hint种类BNL、BKA和MRR。SQL Sharing中新增变量 by_expr_ignore_charset。将 by_expr_ignore_charset 设置为 ON 后,会...

配置数据库代理

开启弹性并行查询(ePQ)能够有效利用多核CPU(集群内空闲计算资源)的并行处理能力,对复杂查询进行加速,详情请参见 弹性并行查询。说明 自2023年4月1日起,集群满足以下条件时会默认开启弹性并行查询,且默认的并行度为2:新创建的集群...

使用跨机并行查询进行分析型查询

PolarDB PostgreSQL版(兼容Oracle)支持使用跨机并行查询功能进行分析型查询,实现一定的HTAP能力。本文介绍如何使用跨机并行查询,提升分析型查询的性能。原理介绍 当一条查询请求在查询协调节点上被执行跨机并行查询时,该查询产生的...

使用跨机并行查询进行分析型查询

PolarDB PostgreSQL版(兼容Oracle)支持使用跨机并行查询功能进行分析型查询,实现一定的HTAP能力。本文介绍如何使用跨机并行查询,提升分析型查询的性能。原理介绍 当一条查询请求在查询协调节点上被执行跨机并行查询时,该查询产生的...

查看消费明细

0-N代表分析步骤有多个并行执行的计算作业,该数字对应该计算作业的编号。1:该计算的重试次数。基因分析平台的智能调度,对可恢复的失败作业自动重试,次。计费项:运行任务中的计算作业具体使用的平台资源类型,包括vCPU、内存、实例规格...

使用多机MPP对海量数据分析提速

其他操作 判断当前SQL语句是否可以使用列存索引的多机并行能力 您可以通过在SQL语句中添加HINT语法 SET_VAR(imci_plan_use_mpp=forced)查看SQL语句的执行计划,以此判断该SQL语句是否可以使用多机并行能力。示例如下:EXPLAIN SELECT/*...

创建任务工作负载Job

阿里云容器计算服务ACS集群支持通过界面创建Job类型的应用。本文将创建一个Job类型的busybox应用,并演示任务(Job)应用的特性。背景信息 Job负责批量处理短暂的一次性任务(short-lived one-off tasks),即仅执行一次的任务,它保证批...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
批量计算 函数计算(旧版) 云服务器 ECS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用