云速搭部署GPU云服务器
通过云速搭实现GPU云服务器的部署，这里使用 ECS 的 UserData 特性自动安装GPU 驱动、AIACC 等组件，减少配置工作量。涉及产品 专有网络VPC GPU云服务器 弹性公网IP 云速搭CADT 方案架构 操作步骤 具体操作步骤请参考《云速搭部署 GPU ...
什么是推理引擎DeepGPU-LLM
DeepGPU-LLM是阿里云研发的基于GPU云服务器的大语言模型（Large Language Model，LLM）推理引擎，在处理大语言模型任务中，该推理引擎可以为您提供高性能的大模型推理服务。产品简介 DeepGPU-LLM作为阿里云开发的一套推理引擎，具有易用性...
应用场景
GPU云服务器适用于视频转码、图片渲染、AI训练、AI推理、云端图形工作站等场景，神行工具包（DeepGPU）为了配合GPU云服务器的计算服务增强能力，也适用于所有AI训练场景和AI推理场景。本文主要介绍GPU云服务器和神行工具包（DeepGPU）的...
使用RAPIDS加速机器学习最佳实践
方案优势 阿里云GPU云服务器资源丰富，可灵活选择在GPU上搭建RAPIDS加速机器学习环境。使用容器服务Kubernetes版部署RAPIDS加速机器学习环境。共享存储NAS可提供强大的存储性能。部署架构图 选用的产品列表 产品名称 说明 GPU云服务器 该...
使用RAPIDS加速图像搜索最佳实践
方案优势 阿里云GPU云服务器资源丰富，可灵活选择在GPU上搭建RAPIDS加速图像搜索环境。使用容器服务Kubernetes版可快速部署图像搜索环境和分发应用。共享存储NAS可提供强大的存储性能。部署架构图 选用的产品列表 产品名称 说明 GPU云服务...
API参考
如果您熟悉网络服务协议和一种以上编程语言，推荐您调用API管理您的云上资源和开发自己的应用程序。GPU云服务器适用的API和云服务器ECS一致，详情请参见 ECS API简介 和 ECS API概览。
什么是GPU云服务器
对比项 GPU云服务器 GPU自建服务器 灵活性 能够快速开通一台或多台GPU云服务器实例。实例规格（vCPU、内存及GPU）支持灵活变更，并且支持在线升降配。带宽升降自由。服务器购买周期长。服务器规格固定，无法灵活变更。带宽一次性购买，无法...
部署GPU云服务器
GPU实例作为云服务器ECS的一...后续验证 部署完成后，单击GPU云服务器实例名称跳转到ECS控制台，通过Workbench远程连接GPU实例。可以看到AIACC-Training、AIACC-Inference已经安装完成。执行以下命令，确认NVIDIA 驱动已安装完成。nvidia-smi
地域与网络连通性
不同地域内的轻量应用服务器内网也不互通。如果需要轻量应用服务器与云服务器ECS、云数据库等其他处于专有网络VPC中的阿里云产品内网互通，您可以通过设置内网互通实现互联互通。具体操作，请参见 管理内网互通。说明 同地域下轻量应用...
GPU监控
云监控通过安装在阿里云主机（ECS实例）上的云监控插件，采集GPU的监控数据，您还可以为这些监控项设置报警规则。当某个监控项达到报警条件时，会给您发送报警通知，以便您及时关注其动态。前提条件 请确保您已在云服务器ECS上创建GPU计算...
阿里云异构计算产品总览
GPU云服务器 GPU云服务器是基于GPU应用的计算服务器。GPU在执行复杂的数学和几何计算方面有着独特的优势。特别是浮点运算、并行运算等方面，GPU可以提供上百倍于CPU的计算能力。作为阿里云弹性计算家族的一员，GPU云服务器结合了GPU计算力...
连接内网
如果需要在非企业内网环境下访问企业内网的数据或业务系统，您需要先连接企业内网。本文介绍PC端和移动端如何连接企业内网。前提条件 PC端或移动端连接内网前，需要先完成CloudUEM客户端的下载和安装。PC端连接内网 打开PC端CloudUEM客户端...
什么是神行工具包（DeepGPU）
神行工具包（DeepGPU）是阿里云专门为GPU云服务器搭配的GPU计算服务增强工具集合，旨在帮助开发者在GPU云服务器上更快速地构建企业级服务能力。GPU云服务器搭配神行工具包（DeepGPU）中的组件可以帮助您更方便地利用阿里云的云上GPU资源，...
AIGC文本生成视频
本文介绍如何使用GPU云服务器搭建Stable Diffusion模型，并基于ModelScope框架，实现使用文本生成视频。背景信息 自多态模型GPT-4发布后，AIGC（AI Generated Content，AI生成内容）时代正扑面而来，从单一的文字文本，演化到更丰富的图片...
ECS实现内网互通
云服务器ECS与云数据库、负载均衡以及对象存储之间也可以使用内网相互连接使用。内网中的ECS实例，网络类型、所属账号、地域、安全组等都会影响内网通信。您可以参考表格内容，在不同场景下，实现内网互通。网络类型 所属账号 地域 安全组 ...
轻量应用服务器能否通过VPC内网连接RDS？
最新内容请参见 轻量应用服务器能否通过VPC内网连接RDS？感谢您的支持。
GPU监控
云监控通过安装在阿里云主机（ECS实例）上的云监控插件，采集GPU的监控数据，您还可以为这些监控项设置报警规则。当某个监控项达到报警条件时，会给您发送报警通知，以便您及时关注其动态。前提条件 请确保您已在云服务器ECS上创建GPU计算...
重启实例
GPU实例作为云服务器ECS的一类实例规格，保持了与ECS实例相同的管理操作。本文介绍如何通过控制台重启实例。前提条件 待重启的实例必须处于 运行中 状态。背景信息 重启操作是维护云服务器的一种常用方式，如系统更新、重启保存相关配置等...
连接内网
终端用户登录阿里云网络客户端，连接内网。操作步骤 登录阿里云网络客户端。登录时，需要输入智能接入网关APP实例ID、用户名和密码。该信息在管理员发送的邮件中可获取，如果没有收到，请联系管理员。单击 一键连接，连接内网。系统显示 ...
接入Nvidia GPU监控数据
Nvidia GPU服务器中提供多项监控指标，您可以将Nvidia GPU服务器中的监控指标接入到全栈可观测应用中，进行可视化展示。前提条件 已创建实例。具体操作，请参见 创建实例。步骤一：安装NVIDIA GPU驱动 日志服务 使用 nvidia-smi 命令采集...
什么是点对点连接服务
点对点连接服务均可通过本地或长途接入线路，将客户企业DC/企业内网接入到分布于全国各地的ENA接入点，并通过ENA提供的虚拟连接形成内网连接，以便实现客户节点的内外通信需求。基本概念 术语 说明 ENA接入点 ENA提供的、分布于全国各主要...
产品优势
阿里云GPU云服务器具有广阔的覆盖范围、超强的计算能力、出色的网络性能和灵活的购买方式，神行工具包（DeepGPU）是专门为GPU云服务器搭配的具有GPU计算服务增强能力的免费工具集。本文主要介绍GPU云服务器和神行工具包（DeepGPU）的优势。...
Linux系统通过内网IP地址挂载Windows系统共享目录报错
[$IP]为Windows共享服务器内网IP地址。[$Dir]为Windows系统的共享目录.[$Linux_Dir]为需要挂载到的Linux目录。系统显示类似如下。mount:wrong fs type,bad option,bad superblock on/[$IP]/[$Dir]具体报错如下图所示。问题原因 Linux系统...
云服务使用限制索引
弹性计算 云服务 使用限制 云服务器ECS 使用限制 弹性裸金属服务器 使用限制 FPGA云服务器 使用限制 GPU云服务器 使用限制 存储容量单位包 使用限制 块存储 使用限制 轻量应用服务器 使用限制 专有宿主机 使用限制 批量计算 使用限制 容器...
在GPU集群中加速AI模型训练
本文适用于AI图片的训练场景，使用文件存储CPFS/NAS作为共享存储，使用容器服务Kubernetes版管理GPU云服务器集群实现AI图片的训练加速。方案优势 使用阿里云的容器服务ACK可快速搭建AI图片训练基础环境。使用CPFS存储训练数据，支持多个...
使用救援连接Linux服务器
当您的Linux服务器因为修改SSH配置等其它原因导致无法远程连接时，可以通过管理控制台的救援功能临时登录服务器进行问题修复。背景信息 仅Linux服务器支持救援功能。选用以下镜像创建的服务器均为Linux服务器：Linux系统的应用镜像 CentOS...
ECS实例无法通过ping命令访问OSS内网域名
如果系统返回HTTP 200的状态码，说明内网连接正常。telnet 命令：通过 telnet 命令访问OSS内网域名的80端口，示例命令如下。telnet[$Bucket].[$OSS_Domain]80 如果系统返回 Escape character is '^]'.，说明网络正常。如果 curl 命令和 ...
内网安全运维最佳实践
在SASE控制台，添加堡垒机应用，配置内网连接堡垒机业务。具体操作，请参见 管理应用。在SASE控制台，配置零信任策略，使运维用户允许访问堡垒机业务。具体操作，请参见 配置零信任策略。完成配置，并在终端连接SASE后，即可使用运维客户端...
基本概念
本文汇总使用GPU云服务器过程中涉及的基本概念，方便您查询和了解相关概念。GPU云服务器相关概念 概念 说明 GPU 图形处理器（Graphics Processing Unit）。相比CPU具有众多计算单元和更多的流水线，适合用于大规模并行计算等场景。CUDA ...
能够ping通Linux服务器但是无法远程连接
问题描述 无法远程连接Linux系统的阿里云轻量应用服务器，但是可以ping通该Linux服务器。报错信息如下图所示。问题原因 可能原因如下：服务器密码输入错误 SSH服务配置异常 配置文件配置异常 Linux服务器的防火墙禁用了22端口（SSH服务）...
异构计算产品最佳实践概览
GPU云服务器 搭建Linux环境License Server 使用GRID驱动必须申请相应的License，同时需要将License部署在License Server上，本教程以Ubuntu 18.04操作系统为例，介绍如何搭建Linux操作系统的License Server。搭建Windows环境的License ...
GPU云服务器计费
GPU云服务器计费相关功能与云服务器ECS一致，本文为您介绍GPU云服务器涉及的计费项、计费方式、续费和退费说明等。计费项及其计费方式 一台GPU实例包括计算资源（vCPU、内存和GPU）、镜像、块存储等资源，其中涉及计费的GPU资源如下表所示...
开启或关闭内网访问的安全防护
使用通过 SASE App访问企业的办公应用，您需要开启内网访问的网络安全防护开关。本文介绍如何开启或关闭网络安全防护。前提条件 已安装并登录 SASE App。具体操作，请参见 安装并登录SASE App。企业管理员为您配置了内网访问安全、办公应用...
使用AIACC-Training（AIACC训练加速）加速BERT Fine...
本文适用于自然语言训练场景，例如，通过使用GPU云服务器和极速型NAS训练BERT Finetune模型，同时使用AIACC-Training（AIACC训练加速）进行该模型的训练加速，可有效加快多机多卡的训练速度，提升模型的训练效率和性能。说明 BERT...
Winodws远程连接服务器时如何映射本地电脑磁盘
概述 Winodws远程连接服务器时如何映射本地电脑磁盘。详细信息 打开电脑左下方 开始>所有程序>附件>远程桌面连接，连接服务器时勾选本地磁盘映射，如下截图所示。然后输入 服务器IP，账号密码，登录到服务器后打开我的...适用于 云服务器 ECS
在GPU实例（计算型和虚拟化型）中安装GRID驱动...
在OpenGL、Direct3D、云游戏等图形加速/图形渲染场景下，安装了GRID驱动的GPU可有效提高图形渲染效率和性能。本文为您介绍通过云助手方式在GPU实例（计算型和虚拟化型）中安装GRID驱动（Windows）的方法。说明 创建GPU实例时会默认预装云...
多语言SDK访问（公网&内网）
如果有多个尽量使用多个地址，避免单个节点挂掉连接不上集群。公网和内网访问方式几乎相同，只是地址不同。添加白名单。实际访问之前，请确保已经将客户机的IP加入白名单，具体操作参见 设置白名单。多语言代码示例 Java访问 Maven加入依赖...
使用须知
如果您需要选择其他的实例类型或者需要具有较高CPU性能负载的实例（例如，大型应用、视频编码等），请您使用云服务器ECS。更多信息，请参见 什么是云服务器ECS。轻量应用服务器支持资源升级。更多信息，请参见 升级配置。禁止使用轻量应用...
Linux实例通过端口转发来访问内网服务
通过连接这个本地端口就可以连接到内网的ECS服务器上。这个方法同样适用于Windows系统，为了不与客户PC终端的端口冲突，这里使用33389端口作为本地监听端口。内网的RDS也可以实现。可以在客户PC终端直接使用数据库客户端程序来连接RDS中的...
远程连接Windows服务器
您可以通过轻量应用服务器管理控制台或本地Windows系统自带的远程桌面连接工具连接Windows轻量应用服务器，本文为您提供具体的操作指引。前提条件 待连接的Windows服务器的状态为 运行中。已设置服务器密码。具体操作，请参见 设置或重置...
- 产品推荐
- 这些文档可能帮助您