使用VNC登录实例
无法使用Workbench和第三方远程连接工具（例如PuTTY、Xshell、SecureCRT等）连接实例时，您可以通过VNC远程连接方式登录实例，查看云服务器ECS操作界面的实时状态。重要 自2023年7月10日起，远程连接工具VNC无需单独设置VNC登录密码，即可...
已停售的GPU实例规格
2.5 GHz主频的Intel ® Xeon ® Platinum 8163（Skylake），计算性能稳定 存储：I/O优化实例 仅支持ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘 支持高性能并行文件系统CPFS 网络：支持IPv6 支持专有网络VPC 支持RoCE V2网络，用于低...
在GPU实例上使用RAPIDS加速图像搜索任务
本文以使用RAPIDS加速图像搜索任务为例，介绍如何在预装镜像的GPU实例上使用RAPIDS加速库。前提条件 使用本教程进行操作前，请确保您已经注册了阿里云账号。如还未注册，请先完成 账号注册。背景信息 RAPIDS（全称Real-time Acceleration ...
GPU计算型
主售（推荐类型）GPU计算型实例规格族gn7e GPU计算型实例规格族gn7i GPU计算型实例...服务器实例规格族ebmgn7ex GPU计算型弹性裸金属服务器实例规格族ebmgn7e GPU计算型弹性裸金属服务器实例规格族ebmgn7ix GPU计算型弹性裸金属服务器实例规格...
CLB健康检查工作原理
四层集群内不同服务器分别独立、并行地根据负载均衡策略进行数据转发和健康检查操作。如果某一台四层集群中的服务器对某一台后端服务器健康检查失败，则该四层集群中的服务器将不会再将新的客户端请求分发给相应的异常的后端服务器。四层...
安装并使用DeepGPU-LLM
在处理大语言模型任务中，您可以根据实际业务部署情况，选择在不同环境（例如GPU云服务器环境或Docker环境）下安装推理引擎DeepGPU-LLM，然后通过使用DeepGPU-LLM工具实现大语言模型（例如Llama模型、ChatGLM模型、百川Baichuan模型或通义...
Serverless GPU概述
Serverless GPU是一种新兴的云计算GPU服务，它采用了服务器无感知计算的理念，通过提供一种按需分配的GPU计算资源，有效地解决原有GPU长驻使用方式导致的低资源利用率、高使用成本和低弹性能力等痛点问题。本文介绍Serverless GPU的详细...
Serverless GPU概述
Serverless GPU是一种新兴的云计算GPU服务，它采用了服务器无感知计算的理念，通过提供一种按需分配的GPU计算资源，有效地解决原有GPU长驻使用方式导致的低资源利用率、高使用成本和低弹性能力等痛点问题。本文介绍Serverless GPU的详细...
什么是AI分布式训练通信优化库AIACC-ACSpeed
上图中，GPU0~GPU3或者GPU4~GPU7的各卡之间相互通过PCIe Bridge连接（PIX），而GPU0到GPU4~GPU7、GPU1到GPU4~GPU7、GPU2到GPU4~GPU7、GPU3到GPU4~GPU7之间需要通过socket之间的QPI/UPI接口连接（SYS）。优化方法 在原生NCCL通信库中，默认...
什么是计算优化编译器AIACC-AGSpeed
AIACC-AGSpeed（AIACC 2.0-AIACC Graph Speeding）是阿里云推出的一个基于PyTorch深度学习框架研发的计算优化编译器，用于优化PyTorch深度学习模型在阿里云GPU异构计算实例上的计算性能，相比原始的神龙AI加速引擎AIACC，AIACC-AGSpeed是...
安装和使用Deepytorch Training
Deepytorch Training是阿里云自研的AI加速器，面向生成式AI和大模型场景，提供了显著的训练加速能力。本文主要介绍安装并使用Deepytorch Training的操作方法。前提条件 已创建阿里云GPU实例，且GPU实例需满足以下要求：操作系统为Alibaba ...
使用限制
FPGA实例作为云服务器ECS的一类实例规格，保持了与ECS实例相同的使用限制。本文介绍云服务器ECS在产品功能和服务性能上的不同限制，以及如何申请更高配额。限制概述 使用云服务器ECS有下列限制：仅弹性裸金属服务器和超级计算集群支持二次...
AIACC-ACSpeed体验示例
AIACC-ACSpeed（简称ACSpeed）作为阿里云自研的AI训练加速器，在提高训练效率的同时能够降低使用成本，可以实现无感的分布式通信性能优化。ACSpeed软件包中已为您提供了适配DDP的示例代码，您可以参考本文快速体验使用ACSpeed进行模型分布...
ECS选型最佳实践
本文主要介绍如何结合实际业务场景选购阿里云云服务器ECS。重要 本文主要介绍如何选择企业级实例规格族，不包括入门级（共享型）规格族。有关入门级实例选型，请参见 共享型 或 突发性能实例概述。了解实例规格族 实例规格清单：实例规格族...
使用Megatron-Deepspeed训练GPT-2并生成文本
本文介绍如何使用GPU云服务器，使用Megatron-Deepspeed框架训练GPT-2模型并生成文本。背景信息 GPT-2模型是OpenAI于2018年在GPT模型的基础上发布的新的无监督NLP模型，当时被称为“史上最强通用NLP模型”。该模型可以生成连贯的文本段落，...
启动方式与环境变量说明
在imagenet训练中使用MomentumSGD（训练优化器）时，建议设置为0.9。PERSEUS_NCCL_ENABLE（特殊版本）0：关闭NCCL混合链路支持。1：启用NCCL混合链路支持。默认值为0。当使用SCC机型时，可以启用此feature，在训练时同时使用RDMA链路与VPC...
安装和使用AIACC-AGSpeed
AIACC-AGSpeed（简称AGSpeed）专注于优化PyTorch深度学习模型在阿里云GPU异构计算实例上的计算性能，相比原始的神龙AI加速引擎AIACC，可以实现无感的计算优化性能。本文为您介绍安装和使用AGSpeed的方法。前提条件 已创建阿里云GPU实例，且...
图像度量学习训练（raw）
前提条件 已开通OSS并完成授权，详情请参见 开通OSS服务 和 云产品依赖与授权：Designer。功能限制 支持的计算引擎为DLC。算法简介 图像度量学习训练（raw）组件提供了resnet50、resnet18、resnet34、resnet101、swint_tiny、swint_small、...
产品优势
对比项 弹性容器实例 云服务器ECS 弹性裸金属服务器 成本 只为Pod付费，节约成本。为ECS整体付费。为裸金属服务器整体付费。运维 无需管理节点，运维简单，成本低。需要自行管理节点，运维ECS。需要自行管理节点，运维裸金属服务器。性能 ...
支持资源组的云服务
云服务 云服务代码 控制台 API 资源类型 资源元数据 相关文档 云服务器ECS、FPGA云服务器、GPU云服务器、块存储 ecs 是 是 ddh：DDH 资源ID、资源名称、标签 云服务转组API：JoinResourceGroup 统一转组API：MoveResources 控制台：资源组 ...
已停售的实例规格
处理器：3.2 GHz主频的Intel Xeon E5-2667 v4（Broadwell）处理器 计算性能稳定 I/O优化实例 仅支持SSD云盘和高效云盘 实例网络性能与计算规格对应（规格越高网络性能越强）适用场景：高性能Web前端服务器 高性能科学和工程应用 MMO游戏、...
支持的云服务
什么是弹性伸缩ESS 云助手 云助手是专为云服务器ECS打造的原生自动化运维工具，通过免密码、免登录、无需使用跳板机的形式，在ECS实例上实现批量运维、执行命令（Shell、PowerShell和Bat等）和发送文件等操作。典型的使用场景包括：安装卸...
休眠实例
GPU实例作为云服务器ECS的一类实例规格，保持了与ECS实例相同的管理操作。如果您在某个时间段内无需运行ECS实例，也不会执行某些操作（如升降配等），建议您休眠ECS实例。相比停止实例，休眠实例后再次启动实例，ECS实例会自动恢复至休眠前...
软件概述
E-HPC提供了业界主流的科学计算应用、编译器运行时库、MPI通信库等软件，本文介绍E-HPC支持的软件，以及相关软件的应用场景等。E-HPC软件栈 本文列出支持自动部署的软件，您也可以通过自定义镜像的方式自行部署其他需要的软件。软件列表 ...
在七代安全增强型实例中部署PyTorch深度学习模型
该模型通常被部署于云服务供应商提供的云服务器如阿里云ECS。如何确保这些部署于公有云上的模型不被他人窃取，确保可用不可见，是模型所有者和云服务提供商共同面临的话题。阿里云ECS部分安全增强型实例基于Intel ® SGX（Software Guard ...
开启时空并行查询
对于服务器内存有限的高并发访问，开启并行查询时，需要控制参数work_mem（min 64KB)，确保并发访问数量乘以并行worker数量乘以work_mem不超过服务器内存的60%。使用方法 开启Ganos并行查询的方法如下：修改PostgreSQL配置文件postgresql....
开启时空并行查询
对于服务器内存有限的高并发访问，开启并行查询时，需要控制参数work_mem（min 64KB)，确保并发访问数量乘以并行worker数量乘以work_mem不超过服务器内存的60%。使用方法 开启Ganos并行查询的方法如下：修改PostgreSQL配置文件postgresql....
开启时空并行查询
对于服务器内存有限的高并发访问，开启并行查询时，需要控制参数work_mem（min 64KB)，确保并发访问数量乘以并行worker数量乘以work_mem不超过服务器内存的60%。使用方法 开启Ganos并行查询的方法如下：修改PostgreSQL配置文件postgresql....
GPU FAQ
排查GPU监控常见问题 可用的GPU数目少于实际GPU数目 GPU节点中重启Kubelet和Docker服务异常 修复GPU实例重启或被置换后设备ID变更问题 阿里云容器服务是否支持GPU虚拟化型（vGPU）实例？如何在已有集群的GPU节点上手动升级Kernel？修复GPU...
接入NVIDIA GPU监控数据
您可使用Telegraf采集NVIDIA GPU监控数据，再通过日志服务Logtail将Telegraf数据上传到MetricStore中，搭建NVIDIA GPU可视化监控方案。本文介绍如何通过日志服务来完成NVIDIA GPU监控数据的采集和可视化。前提条件 已创建Project和...
搭建Linux环境GRID驱动的License Server
步骤三：安装并运行Apache Tomcat服务器 使用Linux发行版的软件包管理器安装所需的Apache Tomcat软件包。sudo apt install tomcat8 安装完成后，运行以下命令，将Tomcat服务设置为开机自启动。sudo systemctl enable tomcat8.service 启动...
搭建Windows环境GRID驱动的License Server
安装GRID驱动，然后添加License服务器并激活License。具体操作，请参见 在GPU实例（计算型和虚拟化型）中安装GRID驱动（Windows）。激活License时，请填写您搭建了License Server的ECS实例公网IP，端口号为7070。前往License Server管理...
产品规格
ecs.sccgn6.24xlarge 处理器：2.5 GHz主频的Intel ® Xeon ® Gold 6149（Skylake）vCPU：96 内存：384GiB GPU：8*Nvidia Tesla V100 以太网：30Gbit/s RDMA：50Gbit/s 高效云盘 ESSD云盘 SSD云盘 需要GPU参与的单机或多机并行计算业务，如...
在GPU实例上使用RAPIDS加速机器学习任务
RAPIDS预装镜像已经发布到阿里云镜像市场，创建GPU实例时，您可以在镜像市场中搜索 NVIDIA RAPIDS 并使用RAPIDS预装镜像。说明 该RAPIDS预装镜像使用Ubuntu 16.04 64-bit操作系统。NGC（全称NVIDIA GPU CLOUD）是NVIDIA推出的一套深度学习...
密码机类型
0.006秒 SM2 PKCS#1 Raw裸验签运算性能：1,300次/秒，响应时间：0.018秒 RSA2048 PKCS#7 Attached带原文的签名运算性能：350次/秒，响应时间：0.78秒 RSA2048 PKCS#7 Attached带原文的验签运算性能：1,500次/秒，响应时间：0.025秒 RSA2048...
使用AIACC-Training MXNet版
示例命令如下：perseusrun-np 8-H localhost:8 python$examples_path/mxnet_mnist.py 适配MXNet 适配基于KVStore的API 为了支持InsightFace中特殊的数据+模型并行，Perseus KVStore增加了如下API：local_rank：返回当前GPU worker在本节点...
什么是Deepytorch Training（训练加速）
Deepytorch Training是阿里云自研的AI训练加速器，为生成式AI和大模型场景提供训练加速功能。本文主要介绍Deepytorch Training在训练加速上的概念、优势及特性。Deepytorch Training介绍 Deepytorch Training面向生成式AI和大模型场景，...
使用eGPU Kubernetes组件
eGPU是容器虚拟化方案，可直接用于支持云原生资源平台，为大规模集群提供GPU共享能力。为了在Kubernetes集群中使用eGPU共享GPU资源，需要通过以下步骤安装eGPU device plugin使能GPU虚拟化的调度能力。前提条件 Docker推荐19.03.5及以上...
计费概述
无影云Flow 支持 会话时长包计费方式。本文介绍具体的计费公式、计费组成、计费周期和支付方式等。付费方式 无影云Flow 支持以下付费方式：会话时长包：一种预付费模式，即先付费再使用。费用=会话时长包规格单价（元/个）×会话时长包数量...
DescribeInstanceTypes-查询云服务器ECS提供的实例...
调用DescribeInstanceTypes查询云服务器ECS提供的所有实例规格的信息，也可以查询指定实例规格的信息。接口说明 调用接口前，您需要注意：MaxResults（每页最大条目数）参数的最大值为 100，对于在 2022 年调用过本 API 的用户，MaxResults...
- 产品推荐
- 这些文档可能帮助您