IO加速
本文档将详细介绍该技术的优势、适用场景和工作原理，帮助您在面临大规模或频繁数据读写需求时显著提升数据库性能。背景 RDS PostgreSQL在数据处理过程中，数据会从磁盘读取到内存，在内存中处理完成后，数据再从内存写入到磁盘中。与内存...
如何使用Prometheus监控Windows
CPU指标 CPU作为计算机系统的运算和控制核心，是信息处理、程序运行的最终执行单元，您可以关注以下主要指标。指标名称 指标级别 指标来源 指标说明 CPU使用率（%）Critical WMI（PercentProcessorTime）若长时间CPU使用率达到100%，表示...
如何使用Prometheus监控Windows
CPU指标 CPU作为计算机系统的运算和控制核心，是信息处理、程序运行的最终执行单元，您可以关注以下主要指标。指标名称 指标级别 指标来源 指标说明 CPU使用率（%）Critical WMI（PercentProcessorTime）若长时间CPU使用率达到100%，表示...
并行操作
并行操作Raster对象 原理 通常情况下raster对象并行操作技术可以应用于单个raster对象的操作过程，通过多个CPU并行计算raster对象中的子集内容，从而降低整个raster对象的操作时间。每个子集内容的计算均独立运行，当所有子集执行完成，...
并行操作
并行操作Raster对象 原理 通常情况下raster对象并行操作技术可以应用于单个raster对象的操作过程，通过多个CPU并行计算raster对象中的子集内容，从而降低整个raster对象的操作时间。每个子集内容的计算均独立运行，当所有子集执行完成，...
MaxFrame概述
您可以用更熟悉、高效、便捷的方式利用MaxCompute的海量计算资源及数据进行大规模数据处理、可视化数据探索分析以及科学计算、ML/AI开发等工作。本文为您介绍MaxFrame背景信息、功能介绍及使用场景。版本说明 当前MaxCompute MaxFrame功能...
并行操作
并行操作Raster对象 原理 通常情况下raster对象并行操作技术可以应用于单个raster对象的操作过程，通过多个CPU并行计算raster对象中的子集内容，从而降低整个raster对象的操作时间。每个子集内容的计算均独立运行，当所有子集执行完成，...
什么是基因分析平台？
提供计算侧的文件访问缓存加速，支持计算作业直接读写OSS文件，解决并行任务的I/O和吞吐问题 大规模并行计算调度，提供容器/虚拟机执行环境，支持多种异构计算，加速基因分析。工程化的流程执行引擎，支持GA4GH标准（WDL/CWL）,无需迁移...
Ingress概述
本文介绍Ingress基本概念、工作原理和使用说明。索引 Ingress基本概念 Nginx Ingress Controller ALB Ingress Controller MSE Ingress Controller Ingress基本概念 在Kubernetes集群中，Ingress作为集群内服务对外暴露的访问接入点，几乎...
ALB Ingress概述
兼容Nginx Ingress，具备处理复杂业务路由和证书自动发现的能力，支持HTTP、HTTPS和QUIC协议，完全满足在云原生应用场景下对超强弹性和大规模七层流量处理能力的需求。相关文档 通过ALB Ingress访问服务 管理ALB Ingress Controller组件
分布式工作流Argo集群概述
分布式工作流Argo集群（简称 工作流集群）采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。本文介绍 工作流集群 的控制台操作...
大规模ACK Pro集群使用建议
大规模集群使用须知 相较于使用多个集群，构建一个大规模集群可以有效减少集群管理运维负担，提高资源利用率。但在某些复杂的业务场景中，建议您根据业务逻辑或需求将服务拆分到多个集群中，例如非生产（测试）服务与生产（开发）服务拆分...
ALB Ingress概述
兼容Nginx Ingress，具备处理复杂业务路由和证书自动发现的能力，支持HTTP、HTTPS和QUIC协议，完全满足在云原生应用场景下对超强弹性和大规模七层流量处理能力的需求。ALB Ingress Controller安装要求 在注册集群上安装ALB Ingress ...
高性能计算优化型实例概述
通过 弹性高性能计算E-HPC，您可以像使用其他ECS实例一样，任意创建HPC优化实例，扩展云上大规模并行任务的计算效率。使用HPC优化实例时，请注意：不支持规格变配。提供物理内核，为优化性能不支持开启超线程配置。高性能计算优化型实例...
使用Argo Workflow编排动态DAG Fan-out/Fan-in任务
您可以使用 ACK One分布式工作流Argo集群 编排工作流，工作流集群 支持托管Argo Workflow，提供完善的售后技术支持，可通过动态DAG方式编排Fan-out Fan-in任务，支持弹调度云上算力，调度数万核CPU资源支撑大规模子任务的并行运行。...
产品简介
支持秒级启动和大规模弹性伸缩，减少任务积压排队等待，提高大规模并行计算的业务效率。延时极度敏感业务场景 延时极度敏感的业务场景，例如高性能网络服务器、网关系统和中间件系统等业务，使用绑核的独享型实例，确保业务负载的稳定无...
计算资源优化
GPU的功能特性如下：拥有大量擅长处理大规模并发计算的算术逻辑单元（Arithmetic and Logic Unit，即ALU）、能够支持多线程并行的高吞吐量运算、逻辑控制单元相对简单。适用于视频转码、图片渲染、AI训练、AI推理、云端图形工作站等场景。...
MSE Ingress概述
兼容Nginx Ingress以及50多个Nginx Ingress的注解，覆盖90%以上的Nginx Ingress业务场景，支持多服务版本同时灰度发布、灵活的服务治理能力以及全方位的安全防护保障，能够满足大规模云原生分布式应用的流量治理诉求。MSE Ingress功能介绍 ...
基本概念
相比CPU具有众多计算单元和更多的流水线，适合用于大规模并行计算等场景。CUDA NVIDIA推出的通用并行计算架构，帮助您使用NVIDIA GPU解决复杂的计算问题。cuDNN NVIDIA推出的用于深度神经网络的GPU加速库。DeepGPU 阿里云专门为GPU云服务器...
MSE Ingress概述
兼容Nginx Ingress以及50多个Nginx Ingress的注解，覆盖90%以上的Nginx Ingress业务场景，支持多服务版本同时灰度发布、灵活的服务治理能力以及全方位的安全防护保障，能够满足大规模云原生分布式应用的流量治理诉求。MSE Ingress功能介绍 ...
快速玩转Tablestore入门与实战
订单搜索篇 基于MySQL+Tablestore分层存储架构的大规模订单系统实践-SQL查询和分析 基于MySQL+Tablestore分层存储架构的大规模订单系统实践-数据处理ETL篇 基于MySQL+Tablestore分层存储架构的大规模订单系统实践-历史数据分析篇 基于MySQL...
MSE Ingress概览
兼容Nginx Ingress以及50多个Nginx Ingress的注解，覆盖90%以上的Nginx Ingress业务场景，支持多服务版本同时灰度发布、灵活的服务治理能力以及全方位的安全防护保障，能够满足大规模云原生分布式应用的流量治理诉求。MSE Ingress功能介绍 ...
添加访问地址
将只需要获取数据副本的读操作分散到多个从节点上，可实现并行处理和负载均衡，减少数据库的负载和响应时间，提高用户的体验和满意度。更多信息，请参见 数据库代理。概念介绍 主地址：其读写模式为可读可写，默认读主，提供强一致读写。...
应用场景
高性能计算 适用于大规模高性能科学计算、并行计算、仿真计算等场景，如气象预报、生物制药、基因测序、图像处理等。推荐使用 弹性高性能计算E-HPC，弹性高性能计算可以将计算能力积聚，用并行计算方式解决更大规模的科学、工程和商业问题...
灵骏常见问题
在并行度极高的大规模计算场景，比如自然语言处理、自动驾驶模型训练、推荐引擎等，相比普通GPU托管服务可以减少训练的时间和成本，建立更大、更复杂的模型。开通集群后，是否需要安装GPU驱动？灵骏计算节点的操作系统镜像中已包含GPU驱动...
OSS触发器概述
整个架构中，您只需要专注于函数逻辑的编写，系统将以实时的、可靠的、大规模并行的方式处理海量的数据。OSS 触发器使用限制 仅 原生OSS触发器 支持查询Bucket侧关联的所有触发器。您可以根据业务情况，重复使用已有的OSS触发器或删除不再...
构建基于Serverless架构的弹性高可用音视频处理系统
视频处理工作流系统 如果您需要加快大视频的转码速度或者完成各种复杂的组合操作，可以通过 Serverless 工作流 编排函数实现功能强大的视频处理系统。方案架构图如下。当用户上传一个MP4格式的视频到OSS，OSS触发器自动触发函数执行，然后...
减灾与应急时空解决方案与案例
可在表级和操作级充分利用时空并行处理能力加快大数据计算效率。系统原生部署在云端，支持直接使用SQL实现传统GIS服务软件提供的大部分功能，还支持性能及存储空间同时线性扩展。项目价值 领域专业数据一体化融合管理和处理能力，提供存储...
产品优势
难以支撑大规模高并发转码任务。专业的转码算法 强大的计算资源，先进的视频处理算法，业界独有的画质重生技术，将现存普通或受损的影视内容重制为超高清或画质修复的版本。视频质量依赖开源转码服务。功能丰富、高可定制 视频转码、截图、...
数据科学计算概述
为满足用户基于MaxCompute进行大规模数据处理、分析、挖掘及模型训练的需求，MaxCompute提供了一套Python开发生态，让用户通过统一的Python编程接口一站式、高效地完成数据处理、加工及挖掘工作。发展路径 MaxCompute提供的Python开发生态...
Llama3-8B大模型微调训练
num_processes 1：设置并行处理的进程数量为1，即不进行多进程并行处理。config_file/ml/code/multi_gpu.yaml：指定配置文件的路径。ml/code/sft.py：指定要运行的Python脚本的路径。脚本/ml/code/sft.py 接受的参数：model_name./LLM-...
已停售的GPU实例规格
适用场景：超大规模机器学习集群训练场景 大规模高性能科学计算和仿真计算 大规模数据分析、批量计算、视频编码 sccgn6e包括的实例规格及指标数据如下表所示。实例规格 vCPU 内存（GiB）GPU GPU显存（GB）网络带宽（Gbit/s）网络收发包PPS ...
多级分区表静态裁剪与并行扫描
背景信息 随着数据量的不断增长，表的规模将会越来越大。为了方便管理和提高查询性能，用户一般会使用分区表，将大表拆分成多张子分区表，每张子分区表又进一步可以拆成二级子分区表，从而形成了多级分区表。支持多级分区表的静态分区裁剪...
自适应扫描
QC进程在发起并行查询任务时，会启动自适应扫描线程，用于接收并处理来自PX Worker进程的请求消息。自适应扫描线程维护了当前查询扫描任务的进度，并根据每个PX Worker进程的工作进度，向PX Worker进程分派需要扫描的Disk Unit ID。对于...
自适应扫描
QC进程在发起并行查询任务时，会启动自适应扫描线程，用于接收并处理来自PX Worker进程的请求消息。自适应扫描线程维护了当前查询扫描任务的进度，并根据每个PX Worker进程的工作进度，向PX Worker进程分派需要扫描的Disk Unit ID。对于...
无锁结构变更方案对比
Online修改工具：PT-Online（PT-Online-Schema-Change）：工作原理是创建和源表A一样的表A_gst执行DDL操作，同时在A上创建一个DML触发器，然后将A中的数据拷贝到A_gst，在拷贝过程中产生的增量变更就用触发器完成同步更新。拷贝结束后执行...
工作原理
ECI类型的伸缩组与ECS类型的伸缩组的工作原理一致，本文以伸缩组内的ECS实例为例，介绍弹性伸缩的工作原理。关于ECS实例和ECI实例的更多信息，请参见 什么是云服务器ECS 和 什么是弹性容器实例。工作流程 弹性伸缩增加ECS实例的工作流程...
已停售的实例规格
计算：处理器与内存配比为1:2 处理器：采用第三代Intel ® Xeon ® 可扩展处理器（Ice Lake），基频2.7 GHz，全核睿频3.5 GHz，计算性能稳定 支持开启或关闭超线程配置 存储：I/O优化实例 仅支持ESSD云盘 实例存储I/O性能与计算规格对应...
通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark
TPC-DS作为大数据行业中最权威且被广泛认可的基准测试标准，用于衡量大规模数据处理系统的性能与效率的关键指标。阿里云EMR是第一个通过认证的可运行TPC-DS 100 TB的大数据系统。本文介绍如何在EMR集群环境下，充分利用OSS-HDFS服务的优势...
术语表
M MapReduce MapReduce是处理数据的一种编程模型，通常用于大规模数据集的并行运算。您可以使用MapReduce提供的接口（Java API）编写MapReduce程序，来处理MaxCompute中的数据。编程思想是将数据的处理方式分为Map（映射）和Reduce（规约）...
- 产品推荐
- 这些文档可能帮助您