概述
需要并行和分布化Numpy或Scikit-learn，以及支持分布式运行TensorFlow、PyTorch和XGBoost的场景。数据量在TB级别以下的场景。PyODPS DataFrame 使用MaxCompute调度作业的场景。PyODPS DataFrame会将DataFrame编译成MaxCompute SQL。如果...
SetQueue-移动计算节点到指定队列
调用SetQueue移动计算节点到指定队列。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
什么是DataTrust
DataTrust是基于安全多方计算（Secure Multi-Party Computation，MPC）、联邦学习（Federated Learning，FL）、差分隐私（Differential Privacy，DP）等隐私增强计算（Privacy Enhancing Technique）技术打造的隐私增强计算平台，在保障...
并行查询Hint语法
Parallel Hints可以指定优化器是否选择并行执行，还支持指定并行度以及需要并行的表，以及各个算子的并行执行方式。PolarDB MySQL版 8.0.1版本目前支持在并行查询中使用 PARALLEL 和 NO_PARALLEL 两种Hints。PolarDB MySQL版 8.0.2版本除了...
什么是弹性高性能计算E-HPC
弹性高性能计算将计算能力积聚，用并行计算方式解决更大规模的科学、工程和商业问题，在科研机构、石油勘探、金融市场、气象预报、生物制药、基因测序、图像处理等行业均有广泛的应用。产品架构 弹性高性能计算的产品架构如下图所示。弹性...
包年包月资源分时配额
本文为您介绍如何对包年包月计算资源按照时间段设置资源配额，协助您更快上手使用分时配额功能，提高计算资源使用率。背景信息 在数据开发过程中，不同项目（开发、生产或分析）使用计算资源的时段不同。例如，数据仓库团队有生产、开发和...
并行安全性
规划器把查询中涉及的操作分类成 并行安全、并行受限 或者 并行不安全。...在一些情况中，可以（甚至效率更高）把对表的扫描包括在查询的并行部分并且延迟对 WHERE 子句的计算，这样它会出现在 Gather 节点之上。不过，规划器不会这样做。
弹性预留CU最佳实践
本文通过典型场景案例介绍如何选择并配置包年包月预留和弹性预留计算资源，为您提供降本增效的参考建议。背景信息 MaxCompute原支持对包年包月预留计算资源进行自定义Quota切分以及分时配置（一天最多可分为三个时段），配置不同Quota在...
部署代码包
本文以安装第三方依赖emoji为例，介绍如何为您的Python代码安装依赖，打包并部署代码至 函数计算。准备工作 创建一个用于测试的代码目录，如 mycode。Linux或macOS系统 您可以执行 mkdir-p/tmp/mycode 创建。Windows系统 在任意位置新建...
部署代码包
本文以安装第三方依赖emoji为例，介绍如何为您的Python代码安装依赖，打包并部署代码至 函数计算。准备工作 创建一个用于测试的代码目录，如 mycode。Linux或macOS系统 您可以执行 mkdir-p/tmp/mycode 创建。Windows系统 在任意位置新建...
部署代码包
本文以安装第三方依赖emoji为例，介绍如何为您的Node.js代码安装依赖，打包并部署代码至 函数计算。准备工作 创建一个用于测试的代码目录，如 mycode。Linux或macOS系统 您可以执行 mkdir-p/tmp/mycode 创建。Windows系统 在任意位置新建...
MapReduce模型
10 子任务全局并发数（仅适用于拉模型）并行计算 内存网格 网格计算 分布式拉模型支持全局子任务并发数，可以进行限流。1,000 发送500条消息的Demo示例（适用于MapReduce模型）@Component public class TestMapReduceJobProcessor extends ...
PolarDB PostgreSQL版：ePQ架构详解
polar_px_dop_per_node 设置当前会话并行查询的并行度，默认为1，推荐值为当前CPU 总核数，取值范围为1~128。若设置该参数为N，则一个会话在每个节点上将会启用N个ePQ Worker进程，用于处理当前的ePQ逻辑。polar_px_nodes 指定参与ePQ的...
PolarDB PostgreSQL版：ePQ架构详解
polar_px_dop_per_node 设置当前会话并行查询的并行度，默认为1，推荐值为当前CPU 总核数，取值范围为1~128。若设置该参数为N，则一个会话在每个节点上将会启用N个ePQ Worker进程，用于处理当前的ePQ逻辑。polar_px_nodes 指定参与ePQ的...
技术原理
反过来，当计划的并行部分产生大量的元组时，领导者将几乎全用来读取由工作者产生的元组并且执行 Gather 或 Gather Merge 节点上层计划节点所要求的任何进一步处理。在这些情况下，领导者所作的执行并行部分的工作将会很少。当计划的并行...
基本概念
视觉计算服务涉及到的一些基本概念。ACU ACU代表1份AI计算能力，1ACU相当于1路1080P 4Mbps视频流的人脸识别...图片流计算 图片流计算是设备上传图片数据进行AI视觉计算。存储 存储是指设备产品的实时视频流生成视频文件片段，并存储到OSS中。
ST_UnaryUnion
并行度范围为 1~64，格式为JSON字符串，例如 '{"parallel":4}' 代表开启并行计算同时并行度为4，默认为空 '{}'，即串行执行。示例 select st_area(st_union(geom))from tableA where id=1;select st_area(st_union(geom,0.005))from tableA...
任务管理
推模型 子任务单次拉取数（仅适用于拉模型）并行计算 内存网格 网格计算 Slave节点每次向Master节点拉取多少个子任务。5 子任务队列容量（仅适用于拉模型）并行计算 内存网格 网格计算 Slave节点缓存子任务的队列大小。10 子任务全局并发数...
任务管理
推模型 子任务单次拉取数（仅适用于拉模型）并行计算 内存网格 网格计算 Slave节点每次向Master节点拉取多少个子任务。5 子任务队列容量（仅适用于拉模型）并行计算 内存网格 网格计算 Slave节点缓存子任务的队列大小。10 子任务全局并发数...
简介
函数调用 函数计算是基于事件驱动的编程模型。事件源可以是设备消息和定时器，也可以是其它函数的调用请求。每一个函数计算不仅以一个独立的程序任务存在，还可以跟普通函数一样被调用，接收调用时传入的参数，并返回处理结果。安装SDK ...
高性能能力
HTAP跨节点并行执行能力 PolarDB PostgreSQL版（兼容Oracle）支持分析型查询，通过分布式并行计算技术，多个RO点并行执行SQL查询，充分发挥共享存储层的高IO吞吐能力，以及RO点的CPU和memory资源。能在一份TP数据上实时执行分析型查询，而...
产品规格
超级计算集群（SCC）实例还针对E-HPC多机并行计算需求，提供了低延时RDMA网络互联。SCC实例 实例类型 实例规格 计算配置 网络配置 存储配置 推荐应用场景 高主频+低延时网络 ecs.scchfg6.20xlarge 处理器：3.1 GHz主频的Intel ® Xeon ® ...
并行查询性能
具体来说，在存储层仍然将数据分片到不同的线程上，多个线程并行计算，并可能分发到下一个阶段的并行Worker组中，最终并行计算结果汇总到Leader并返回给用户，大幅提升了并行执行能力。并行查询利用多核CPU的并行处理能力，以8核32 GB 独享...
什么是物联网边缘计算
当前支持如下两种边缘应用：函数计算应用：函数计算是一种运行时（Runtime）框架，可完成设备接入到边缘网关的开发以及基于设备数据、事件的业务逻辑开发。当前有云产品模式（结合阿里云函数计算产品使用）和本地直接上传模式。容器镜像...
简介
批量计算服务（Batch Computing Service，简称BatchCompute）是一种适用于大规模并行批处理作业的分布式云服务。我们提供了丰富的API接口，您可以基于此API很方便使用BatchCompute的服务以及开发自己的应用程序。请确保在使用这些接口前，...
石墨文档
解决方案 函数计算是阿里云提供的Serverless计算平台，可以根据请求量动态分配执行环境，毫秒级调度计算资源，在负载高时保持稳定的延时；在负载低时有较高的资源利用率，且只对代码运行时使用的计算资源付费。石墨文档通过函数计算借助...
石墨文档
解决方案 函数计算是阿里云提供的Serverless计算平台，可以根据请求量动态分配执行环境，毫秒级调度计算资源，在负载高时保持稳定的延时；在负载低时有较高的资源利用率，且只对代码运行时使用的计算资源付费。石墨文档通过函数计算借助...
应用场景
云服务器ECS具有广泛的应用场景，既可以...推荐使用 弹性高性能计算E-HPC，弹性高性能计算可以将计算能力积聚，用并行计算方式解决更大规模的科学、工程和商业问题。更多案例 更多关于云服务器ECS的应用场景，请参见 云服务器ECS客户案例。
拉勾教育
解决方案 函数计算是阿里云提供的Serverless计算平台，完美的契合了拉勾教育的诸多痛点，只需编写执行不同编程语言的逻辑并上传代码即可。以HTTP或事件驱动的方式触发函数计算实例执行业务逻辑并响应用户请求。同时与阿里云的对象存储、API...
计算资源
切分和并行计算：同上述“切分和并行计算”说明。除以上五点外，常见计算资源风险点还有“资源相互影响”、“资源节点崩溃”、“依赖服务异常”、“服务进程无响应”、“数据格式异常”、“证书过期”等。可以使用资源隔离、配额控制、多...
常见问题
通过VCS“全视频”，对视频数据进行汇聚并行计算，让机器看视频，一方面提升视频追踪的效率，另一方面提升视频追踪的能力 2 AI处于暴利阶段，整个行业停留在人脸、人体、机动车等成熟算法的工程化上，几乎没有算法创新和突破各AI玩家满足于...
并行计划
因为每个工作者只执行完成计划的并行部分，所以不可能简单地产生一个普通查询计划并使用多个工作者运行它。每个工作者都会产生输出结果集的一个完全拷贝，因而查询并不会比普通查询运行得更快甚至还会产生不正确的结果。相反，计划的并行...
拉勾教育
解决方案 函数计算是阿里云提供的Serverless计算平台，完美地契合了拉勾教育的诸多痛点，只需编写执行不同编程语言的逻辑并上传代码即可。以HTTP或事件驱动的方式触发函数计算实例执行业务逻辑并响应用户请求。同时与阿里云的对象存储、API...
PolarDB处理TPC-H查询的挑战和机遇
利用向量化技术以及基于SIMD指令集的计算原语，实现高效的算子内并行，提升算子执行效率。Oracle近期也推出了其云上的Heatwave service（RAPID），本质就是一个分布式的in-memory column store，利用Oracle一些特殊的硬件优化技术配合列存...
规格常见问题
问题类别 常见问题 包年包月 按量计费模式转为包年包月模式时，如何评估需要购买多少计算资源？包年包月计费模式下，计算资源是如何利用的？按量计费 按量计费模式需要提前购买计算资源吗？一个地域是否可以有多个项目使用开发者版？按量...
基于计算巢SaaS Boost快速搭建商品的售卖系统
本实践旨在指导您如何利用计算巢开源项目SaaS Boost来销售您的软件产品。背景信息 计算巢是一个由阿里云提供的面向企业应用服务商及其客户的PaaS（平台即服务）管理平台。服务提供商可以在计算巢平台上构建其服务，这些服务是云资源与软件...
最佳实践
简介 当查询使用ePQ特性时，PolarDB PostgreSQL版（兼容Oracle）将通过ePQ优化器，生成能够被多个计算节点并行执行的执行计划。ePQ的执行引擎将在多个计算节点上协调执行该计划，同时利用多个节点的CPU、内存、I/O带宽来扫描、计算数据。您...
最佳实践
简介 当查询使用ePQ特性时，PolarDB PostgreSQL版（兼容Oracle）将通过ePQ优化器，生成能够被多个计算节点并行执行的执行计划。ePQ的执行引擎将在多个计算节点上协调执行该计划，同时利用多个节点的CPU、内存、I/O带宽来扫描、计算数据。您...
混合负载HTAP
这种方式也称为MPP并行计算（Massively Parallel Processing，简称MPP）。目前只有 PolarDB-X 只读实例默认开启了MPP并行计算能力。查询优化器 PolarDB-X 的优化器面向HTAP负载设计，对复杂查询有着良好的支持。TP（Transaction Processing...
功能特性
函数计算是一款事件驱动的全托管计算服务。本文列举了函数计算常见应用场景以及对应的功能特性，您可以结合您的业务需求选择合适的场景。功能集 功能 功能描述 参考文档 服务管理 管理服务 服务是函数计算资源管理的单位。创建函数前必须先...
- 产品推荐
- 这些文档可能帮助您