云速搭部署GPU云服务器
通过云速搭实现GPU云服务器的部署，这里使用 ECS 的 UserData 特性自动安装GPU 驱动、AIACC 等组件，减少配置工作量。涉及产品 专有网络VPC GPU云服务器 弹性公网IP 云速搭CADT 方案架构 操作步骤 具体操作步骤请参考《云速搭部署 GPU ...
API参考
如果您熟悉网络服务协议和一种以上编程语言，推荐您调用API管理您的云上资源和开发自己的应用程序。GPU云服务器适用的API和云服务器ECS一致，详情请参见 ECS API简介 和 ECS API概览。
应用场景
GPU云服务器适用于视频转码、图片渲染、AI训练、AI推理、云端图形工作站等场景，神行工具包（DeepGPU）为了配合GPU云服务器的计算服务增强能力，也适用于所有AI训练场景和AI推理场景。本文主要介绍GPU云服务器和神行工具包（DeepGPU）的...
什么是神行工具包（DeepGPU）
神行工具包（DeepGPU）是阿里云专门为GPU云服务器搭配的GPU计算服务增强工具集合，旨在帮助开发者在GPU云服务器上更快速地构建企业级服务能力。GPU云服务器搭配神行工具包（DeepGPU）中的组件可以帮助您更方便地利用阿里云的云上GPU资源，...
列存索引内存管理介绍
VirtualMemory 实际上就是预期 Memory used 为 ExecutionMemoryLimit 时的最高可以分配出的内存配额之和，只要这个比例维持稳定，就可以安全地增加虚拟内存，从而提高系统资源的实际使用率。虚拟内存与并发执行 对各类查询进行测试后，您会...
产品优势
阿里云GPU云服务器具有广阔的覆盖范围、超强的计算能力、出色的网络性能和灵活的购买方式，神行工具包（DeepGPU）是专门为GPU云服务器搭配的具有GPU计算服务增强能力的免费工具集。本文主要介绍GPU云服务器和神行工具包（DeepGPU）的优势。...
异构计算产品最佳实践概览
RAPIDS加速机器学习最佳实践 适用于使用RAPIDS加速库和GPU云服务器来对机器学习任务或者数据科学任务进行加速的场景。相比CPU，利用GPU和RAPIDS在某些场景下可以取得非常明显的加速效果。在GPU实例上使用RAPIDS加速图像搜索任务 使用RAPIDS...
使用RAPIDS加速机器学习最佳实践
方案优势 阿里云GPU云服务器资源丰富，可灵活选择在GPU上搭建RAPIDS加速机器学习环境。使用容器服务Kubernetes版部署RAPIDS加速机器学习环境。共享存储NAS可提供强大的存储性能。部署架构图 选用的产品列表 产品名称 说明 GPU云服务器 该...
使用RAPIDS加速图像搜索最佳实践
方案优势 阿里云GPU云服务器资源丰富，可灵活选择在GPU上搭建RAPIDS加速图像搜索环境。使用容器服务Kubernetes版可快速部署图像搜索环境和分发应用。共享存储NAS可提供强大的存储性能。部署架构图 选用的产品列表 产品名称 说明 GPU云服务...
什么是推理引擎DeepGPU-LLM
DeepGPU-LLM是阿里云研发的基于GPU云服务器的大语言模型（Large Language Model，LLM）推理引擎，在处理大语言模型任务中，该推理引擎可以为您提供高性能的大模型推理服务。产品简介 DeepGPU-LLM作为阿里云开发的一套推理引擎，具有易用性...
部署GPU云服务器
请按照标签顺序依次点击 新建>新建空白应用，构建如下图所示的包含GPU云服务器实例的应用架构：本文所选地域为 华北2（北京）可用区H。双击GPU实例，配置相关参数。参考 创建GPU实例，选择对应的实例规格、镜像及版本。需要修改自定义登录...
Tesla或GRID驱动安装指引
GPU实例本身并未配备相关驱动，只有安装了驱动的GPU实例，才能实现计算加速或图形渲染等功能。根据不同GPU实例规格安装与之匹配的Tesla或GRID驱动，...如果GPU实例安装驱动后，在使用过程中遇到黑屏或其他问题，请参见 GPU云服务器常见问题。
Windows系统盘扩容后磁盘可用空间反而变少
问题原因 实例中的虚拟内存被开启且设置的是系统自动管理，而用于物理内存为64 GB，因此在扩容后虚拟内存涨到65 GB。根据系统推荐设置虚拟内存最大是90 GB，如果系统磁盘空间足够，虚拟内存将占用更多的系统盘空间。解决方案 如非必要，请...
什么是GPU云服务器
对比项 GPU云服务器 GPU自建服务器 灵活性 能够快速开通一台或多台GPU云服务器实例。实例规格（vCPU、内存及GPU）支持灵活变更，并且支持在线升降配。带宽升降自由。服务器购买周期长。服务器规格固定，无法灵活变更。带宽一次性购买，无法...
GPU云服务器计费
GPU云服务器计费相关功能与云服务器ECS一致，本文为您介绍GPU云服务器涉及的计费项、计费方式、续费和退费说明等。计费项及其计费方式 一台GPU实例包括计算资源（vCPU、内存和GPU）、镜像、块存储等资源，其中涉及计费的GPU资源如下表所示...
安装CUDA
如果您想要在GPU云服务器上进行GPU加速计算任务（例如科学计算或大规模并行计算等），则需要安装CUDA开发运行环境。CUDA提供了一整套工具和库，可以帮助您进行GPU加速的程序开发，以充分发挥NVIDIA GPU的计算潜力，提高计算性能和加速运行...
什么是GPU容器共享技术cGPU
GPU容器共享技术cGPU是阿里云基于内核虚拟GPU隔离的容器共享技术。即多个容器共享一张GPU卡，从而实现业务的安全隔离，提高GPU硬件资源的利用率并降低使用成本。为什么选择cGPU 兼容性好 不仅适配标准的Docker和Containerd工作方式，而且还...
阿里云异构计算产品总览
GPU云服务器 GPU云服务器是基于GPU应用的计算服务器。GPU在执行复杂的数学和几何计算方面有着独特的优势。特别是浮点运算、并行运算等方面，GPU可以提供上百倍于CPU的计算能力。作为阿里云弹性计算家族的一员，GPU云服务器结合了GPU计算力...
AIGC文本生成视频
本文介绍如何使用GPU云服务器搭建Stable Diffusion模型，并基于ModelScope框架，实现使用文本生成视频。背景信息 自多态模型GPT-4发布后，AIGC（AI Generated Content，AI生成内容）时代正扑面而来，从单一的文字文本，演化到更丰富的图片...
Windows实例系统负载的查询及分析
虚拟内存 如果Windows实例虚拟内存不足，请参考 Windows虚拟内存不足问题的处理。系统内存 如果Windows实例系统内存问题，请参考 Windows系统内存分析工具的介绍。带宽使用率 如果Windows实例带宽使用率较高，请参考 Windows实例中带宽使用...
Windows系统内存分析工具介绍
微软官方提供多种工具来分析Windows系统的内存使用情况，除了系统自带的任务管理器（Task Manager），资源监视器（Resource Manager），性能监视器（Performance Monitor），还有SysInternals工具，SysInternals工具如RAMMap和PoolMon，...
Windows Update补丁更新失败如何处理？
服务器物理内存或者虚拟内存不足。磁盘文件系统访问权限问题。磁盘空间不足。Windows系统的ECS实例的自身系统组件或者依赖服务损坏。Windows系统的ECS实例默认配置了阿里云内部WSUS服务器，如果该服务器繁忙或者停止响应，可能会导致Update...
接入Nvidia GPU监控数据
Nvidia GPU服务器中提供多项监控指标，您可以将Nvidia GPU服务器中的监控指标接入到全栈可观测应用中，进行可视化展示。前提条件 已创建实例。具体操作，请参见 创建实例。步骤一：安装NVIDIA GPU驱动 日志服务 使用 nvidia-smi 命令采集...
如何配置Windows实例的虚拟内存
概述 云服务器ECS的初始状态虚拟内存的配置规则如下：如果镜像中的虚拟内存设置为未配置，且虚拟机的内存规格为8GB及以下，会默认开启虚拟内存。如果镜像中已配置虚拟内存，或者系统内存在8GB以上，在系统初始化时，不会对虚拟内存进行任何...
在GPU实例（计算型和虚拟化型）中安装GRID驱动...
在OpenGL、Direct3D、云游戏等图形加速/图形渲染场景下，安装了GRID驱动的GPU可有效提高图形渲染效率和性能。本文为您介绍通过云助手方式在GPU实例（计算型和虚拟化型）中安装GRID驱动（Windows）的方法。说明 创建GPU实例时会默认预装云...
创建和管理CLB虚拟服务器组
说明 如果虚拟服务器组中的云服务器存在关联监听或关联转发策略，需要先解除监听或转发策略的关联关系，才可以删除该云服务器。可单击 继续添加，在 我的服务器 面板来继续添加新的云服务器到该虚拟服务器组中。删除虚拟服务器组 虚拟...
Windows系统内存分析工具的介绍
您还可以添加各类内存指标进行检查，打开任务管理器，依次选择 查看>选择列，添加各类内存指标，请重点添加 内存>工作集（检查进程物理内存的占用）和 内存>提交大小（非保留的虚拟内存空间）。Windows 2012 打开任务管理器，单击 性能，...
卸载GRID驱动
警告 GPU实例必须配备了相关驱动才可以正常使用，如果您因某种原因需要卸载当前驱动，请务必再安装与您实例规格及操作系统相匹配的正确驱动，否则会因GPU实例与安装的驱动不匹配而造成业务无法正常进行的风险。在Windows操作系统中卸载GRID...
在GPU虚拟化型实例中安装GRID驱动（Linux）
在AI等通用计算业务场景或者OpenGL、Direct3D、云游戏等图形加速场景下，安装了GRID驱动的GPU可有效发挥高性能计算能力，或提供更流畅的图形显示效果。本文为您介绍通过云助手快速安装GRID驱动的方法。说明 使用云助手安装GRID驱动前，建议...
重启实例
GPU实例作为云服务器ECS的一类实例规格，保持了与ECS实例相同的管理操作。本文介绍如何通过控制台重启实例。前提条件 待重启的实例必须处于 运行中 状态。背景信息 重启操作是维护云服务器的一种常用方式，如系统更新、重启保存相关配置等...
API概览
虚拟服务器组 API 标题 API概述 CreateVServerGroup 创建虚拟服务器组并添加后端服务器 创建虚拟服务器组并向指定的服务器组中添加后端服务器。DeleteVServerGroup 删除虚拟服务器组 删除虚拟服务器组。SetVServerGroupAttribute 修改虚拟...
通过弹性网卡添加后端服务器
在 后端服务器 页签，选择 虚拟服务器组，在 选择服务器组 下拉框中选择已创建的挂载ENI的虚拟服务器组，然后单击 下一步 至 提交，完成将监听的后端服务器切换为挂载ENI的虚拟服务器组。返回 实例管理 页面，查看该实例挂载的ECS和ENI后端...
基本概念
本章节介绍阿里云负载均衡服务使用过程中遇到的常用名词的基本概念和简要描述。名词 说明 负载均衡服务 阿里云计算提供的一种网络负载均衡服务，结合阿里云提供的ECS服务，提供四层和七层负载均衡服务。负载均衡实例 负载均衡实例是一个...
基本概念
本文汇总使用GPU云服务器过程中涉及的基本概念，方便您查询和了解相关概念。GPU云服务器相关概念 概念 说明 GPU 图形处理器（Graphics Processing Unit）。相比CPU具有众多计算单元和更多的流水线，适合用于大规模并行计算等场景。CUDA ...
查看详细信息
VMALLOC_CHUNK 可用的最大连续虚拟内存空间。ACTIVE 最近被访问过的内存页。ACTIVE_ANON 最近被访问过的匿名内存页。KERNEL_STACK 内核栈。WRITEBACK_TMP FUSE使用的临时缓冲。NFS_UNSTABLE 发给NFS server但尚未写入硬盘的缓存页。SWAP_...
相同域名不同路径的流量转发
本教程以四个部署了Nginx服务器的ECS为例，演示如何通过配置域名加URL转发规则，完成如下表所示的流量转发。前端请求 流量转发至 www.example.com/tom 后端服务器SLB_tom1和SLB_tom2，属于虚拟服务器组TOM。www.example.com/jerry 后端...
使用URL实现应用实例分组的流量分发
为应用分组配置虚拟服务器组（虚拟分组）和基于URL的转发策略包含以下两种方式：如果想使用为选定的SLB实例创建过的虚拟服务器组，请执行以下操作：选择 现有虚拟服务器组，并在下方选择已有的虚拟服务器组。重要 同一个虚拟服务器组只允许...
新功能发布记录
2023年9月 功能名称 功能描述 发布时间 相关文档 支持通过SMC迁移其他厂商轻量服务器至阿里云轻量应用服务器 支持通过SMC将其他厂商轻量服务器（腾讯云轻量应用服务器、AWS Lightsail Instance和华为云云耀云服务器）迁移至阿里云轻量应用...
Windows实例无法安装.NET Framework 3.5或语言包如何...
如果是I/O优化实例，其具备较高的磁盘I/O能力，在处理虚拟内存读写时相比普通实例能更快地完成数据交换，从而减小对系统性能的影响，因此可以考虑 开启系统虚拟内存。服务器管理器UI界面安装 在 服务管理器 中单击 添加角色和功能。按照...
将流量转发到虚拟服务器组
通过视频模式介绍将流量转发给关联的虚拟服务器组中的后端服务器的详细操作。虚拟服务器组是一组 ECS 实例。将虚拟服务器组和一个监听关联后，监听只会将流量转发给关联的虚拟服务器组的后端服务器，不会再将流量转发给其他后端服务器。
- 产品推荐
- 这些文档可能帮助您