安装共享GPU调度组件
本文介绍如何在GPU节点上安装共享GPU组件和GPU资源查询工具，实现GPU的调度和隔离能力。前提条件 共享GPU调度目前已实行收费。在使用共享GPU调度前，需开通云原生AI套件。具体收费信息，请参见 云原生AI套件计费说明。关于云原生AI套件的更...
安装GPU拓扑感知调度组件
激活GPU拓扑资源调度前，您需要安装并配置相关组件。本文介绍如何安装GPU拓扑感知调度相关组件以及在集群中开启GPU拓扑感知调度能力。前提条件 已创建ACK Pro集群，且集群的实例规格类型选择为 GPU云服务器。更多信息，请参见 创建...
附录：调度器插件的常用OpenAPI说明
软件配置阶段，在安装调度器过程中，系统会定时地调用服务检测功能（SchedServiceCheck），检测调度器是否安装成功。若不成功则继续等待软件安装，若成功则继续执行下一步。执行节点加入调度器检测（NodeJoinCheck）。在此定时检测中，若...
E-HPC集群调度器插件
例如，在EDA业务场景下，通常情况使用的调度器为商用调度器，但E-HPC平台无法提供商用License供您安装，此时，您可以自行安装调度器并通过调度器插件接入E-HPC平台的能力。调度器插件为您提供了插件模版及配置文件，并将功能定义进行模块化...
使用插件部署混合云集群
安装调度器。需要在云上节点上安装对应的调度器。PBS：参见 PBS Professional。Slurm：参见 Slurm。LSF、OpenLava：制作镜像前无需安装，可在集群创建后通过共享存储安装。测试并制作自定义镜像。下载并运行测试脚本。以beijing地域为例：...
运维助手
若运行在独享调度资源组上的任务执行时需依赖第三方包，为保障任务可顺利执行，您需要先通过该资源组的运维助手功能，将相应的第三方包安装至独享调度资源组。DataWorks的运维助手提供了多种内置的第三方包，可直接安装使用，若内置的第三...
GPU拓扑感知调度
Kubernetes对节点的GPU拓扑信息不感知，调度过程中对GPU的选择...关于GPU拓扑感知调度如何使用，请参见以下文档：GPU拓扑感知调度概述 安装GPU拓扑感知组件 Tensorflow分布式训练使用GPU拓扑感知调度 Pytorch分布式训练使用GPU拓扑感知调度
GPU调度概述
本文介绍调度GPU资源的不同方法，包括使用Kubernetes默认GPU调度...关于如何使用GPU拓扑感知调度，请参见以下文档：GPU拓扑感知调度概述 安装GPU拓扑感知组件 Tensorflow分布式训练使用GPU拓扑感知调度 Pytorch分布式训练使用GPU拓扑感知调度
使用负载热点打散重调度
cpu usage(76.72%)>threshold(50.00%)"55s Normal Killing pod/stress-demo-588f9646cf-7*Stopping container stress 步骤一：安装或修改组件ack-koordinator并开启重调度 未安装ack-koordinator组件 安装ack-koordinator组件，并在 安装...
使用GPU拓扑感知调度（Tensorflow版）
ACK基于Scheduling Framework机制，实现GPU拓扑感知调度，即在节点的GPU组合中选择具有最优训练速度的组合。本文介绍如何使用GPU拓扑感知调度来提升TensorFlow分布式训练的训练速度。...相关文档 GPU拓扑感知调度概述 安装GPU拓扑感知调度组件
使用GPU拓扑感知调度（Pytorch版）
ACK基于Scheduling Framework机制，实现GPU拓扑感知调度，即在节点的GPU组合中选择具有最优训练速度的组合。本文介绍如何使用GPU拓扑感知调度来提升PyTorch分布式训练的训练速度。...相关文档 GPU拓扑感知调度概述 安装GPU拓扑感知调度组件
集群概述
E-HPC支持的调度器如下：类型 调度器 控制台显示 PBS PBS Pro19 pbs19 PBS Pro18 pbs 说明 由选择的镜像决定安装的调度器软件版本。OpenPBS 20 OpenPBS 22 Slurm Slurm 22 slurm22 Slurm 20 slurm20 Slurm 19 slurm19 Slurm 17 slurm ...
接入 Android
原生 AAR 方式 参考 AAR 组件管理，通过 组件管理（AAR）在工程中安装 移动调度 组件。组件化（Portal&Bundle）方式 在 Portal 和 Bundle 工程中通过 组件管理 安装 移动调度 组件。更多信息，请参考 接入流程。使用移动调度 SDK 添加 ...
在ACK集群部署多租户任务调度管理
企业在ACK上构建任务调度系统的过程为：首先，运维人员需要创建一个ACK集群，并在ACK集群中安装队列调度系统Kube Queue、Prometheus监控以及Arena组件。Kube Queue可以帮助企业有效地管理大量并发任务，确保资源的合理分配。Kube Queue通过...
共享GPU调度
容器服务 Kubernetes 版 ACK（Container ...若ACK专有版集群已安装共享GPU调度基础版，在迁移至ACK Pro托管版集群后，需要将共享GPU调度基础版升级为共享GPU调度专业版。具体操作，请参见 ACK专有版集群迁移至ACK集群Pro版后升级共享GPU组件。
使用共享GPU调度（eGPU）
说明 ACK灵骏托管版集群默认会安装基于eGPU的共享GPU调度组件，您可以在ACK灵骏托管版集群中直接使用基于eGPU的GPU共享能力。关于如何判断集群是否已安装基于eGPU的共享GPU组件的具体操作，请参见 如何查看是否已安装基于eGPU的共享GPU组件...
共享GPU调度概述
关于如何安装和使用共享GPU调度，请参考：安装共享GPU调度组件 运行共享GPU调度示例 除此以外，还有一些进阶能力，您可以根据业务需求选择：通过共享GPU调度实现多卡共享 通过共享GPU调度实现算力分配 配置共享GPU调度节点选卡策略 配置...
在ACK专有版集群中使用共享GPU调度
如您需要在 ACK专有版集群 中使用共享GPU调度基础版，请参见...基础版迁移专业版 安装共享GPU调度组件 运行共享GPU调度组件 使用共享GPU调度实现仅共享不隔离能力 使用共享GPU调度实现cGPU算力分配策略 解决专业版集群升级共享GPU调度失效问题
ack-ai-installer
关于共享GPU调度与隔离的更多信息，例如安装方式、使用场景等，请参见 安装共享GPU调度组件、通过共享GPU调度实现算力分配。gputopo-device-plugin 结合ACK Scheduler，ack-ai-installer（gputopo-device-plugin）支持实现GPU拓扑感知调度...
更改共享GPU调度显存最小分配单位
关于安装共享GPU调度专业版的组件，请参见 安装共享GPU调度组件。集群类型为ACK Pro且集群版本≥1.18.8。关于创建ACK Pro集群和升级集群，请参见 创建ACK Pro版集群 和 升级集群。注意事项 如果集群中已存在共享GPU应用（申请了aliyun....
通过Docker安装并使用cGPU服务
具体操作，请参见 安装共享GPU调度组件。运行cGPU服务 影响cGPU服务的环境变量如下表所示，您可以在创建容器时指定环境变量的值，该值可以控制容器通过cGPU服务获得算力。环境变量名称 取值类型 说明 示例 CGPU_DISABLE Boolean 是否禁用...
通过共享GPU调度实现算力分配
关于安装共享GPU组件的具体操作，请参见 安装共享GPU调度组件。cGPU版本为1.0.5及以上。关于cGPU的升级操作，请参见 升级节点cGPU版本。使用限制 共享GPU调度目前支持 仅申请显存 和 同时申请显存和算力 两种任务，这两种任务不能同时存在...
创建安全沙箱应用
说明 应用非亲和性调度的设置方式与亲和性调度相同，但是相同的调度规则代表的意思不同，请根据使用场景进行选择。调度容忍 容忍被应用于Pod，允许这个Pod被调度到相对应的污点上。调度到虚拟节点 设置是否调度到虚拟节点。如果您集群中...
使用调度器自定义参数
开启负载感知调度能力，需要安装ack-koordinator组件。bool false true false loadAwareResourceWeight 负载感知调度插件参考的CPU与Memory的资源权重。不配置时资源权重为0。resourceName:string resourceWeight:int resourceName使用...
通过ack-co-scheduler实现多级弹性调度
安装相关组件 使用多级弹性调度，您需要安装以下组件。ack-virtual-node：可选组件，如需使用弹性ECI能力，才需在注册集群中安装ack-virtual-node组件。ack-co-scheduler：通过该组件，您可以自定义ResourcePolicy CR对象，使用多级弹性...
GPU拓扑感知调度概述
本文简要描述了GPU拓扑分布情况，以及GPU拓扑感知调度的优势。GPU拓扑分布 下图为NVLink连接8个Tesla V100的混合立体网络拓扑。...相关文档 安装GPU拓扑感知调度组件 使用GPU拓扑感知调度（Tensorflow版）使用GPU拓扑感知调度（Pytorch版）
GPU节点卡型属性标签
在使用Kubernetes集群...相关文档 安装云原生AI套件的调度组件ack-ai-installer之后，您可以为GPU节点打上调度属性标签，帮助GPU节点启用共享GPU调度、GPU拓扑感知调度等能力。详细信息，请参见 GPU节点调度属性标签说明及标签值的切换方法。
GPU节点调度属性标签
安装云原生AI套件的调度组件ack-ai-installer之后，您可以为GPU节点打上调度属性标签，帮助GPU节点启用共享GPU调度、GPU拓扑感知调度等能力。本文介绍GPU节点调度属性标签及如何切换标签的值。GPU节点调度属性标签说明 标签ack.node.gpu....
查询定时调度
使用命令行工具查看定时调度 在使用命令行工具创建定时调度前，您需要安装和配置阿里云命令行工具CLI。详细信息，请参见 什么是阿里云CLI？查看单个定时调度。（可选）执行以下命令查看该API的请求参数。aliyun fnf DescribeSchedule help ...
创建定时调度
使用命令行工具创建定时调度 在使用命令行工具创建定时调度前，您需要安装和配置阿里云命令行工具CLI。详细信息，请参见 什么是阿里云CLI？可选：执行以下命令查看创建定时调度API的请求参数。aliyun fnf CreateSchedule help 预期输出：...
Airflow调度DLA Spark作业
Airflow是比较流行的开源调度工具，可以实现各类工作负载的DAG编排与调度。您可以通过Spark-Submit和Spark-SQL命令行来实现Airflow调度Spark任务。DLA Spark提供了命令行工具包，支持通过Spark-Submit和Spark-SQL方式来提交Spark作业。您...
实现虚拟节点Pod可用区打散以及亲和调度
在 ACK Serverless集群Pro版 中，您可以通过Kubernetes原生调度语义实现分布式任务的跨可用区打散，以达到高可用区部署的要求，或者通过Kubernetes原生调度语义实现分布式任务在指定可用区中的亲和性部署，以达到高性能部署的要求。...
创建混合云集群
扩容前，请根据业务需要准备好自定义镜像，该自定义镜像中须安装有deadline或custom调度器。关于如何创建自定义镜像，请参见 使用实例创建自定义镜像。步骤一：创建混合云集群 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域...
删除定时调度
通过命令行工具删除定时调度 在使用前您需要安装和配置阿里云命令行工具CLI。可选：执行以下命令查看该API的请求参数。aliyun fnf DeleteSchedule help 预期输出：Alibaba Cloud Command Line Interface Version 3.0.45 Product:fnf...
修改定时调度
使用工具修改定时调度 在使用前您需要安装和配置阿里云命令行工具CLI。可选：执行以下命令查看该API的请求参数。aliyun fnf UpdateSchedule help 预期输出：Alibaba Cloud Command Line Interface Version 3.0.45 Product:fnf(FunctionFlow...
历史功能发布记录（2023年）
全部 无 云原生AI套件 GPU调度支持GPU节点动态划分MIG ACK托管集群 安装 云原生AI套件 的调度组件ack-ai-installer后，通过给GPU节点打上特殊标签，可以让GPU节点开启MIG能力以及动态划分。节点按最大支持MIG实例数上报MIG资源，每个Pod的...
自定义资源组
如果使用自定义调度资源组出现问题，需要首先确认Agent是否安装监控。操作如下所示：登录机器，切换至有权限账号下。执行下述命令。wget ...
开启集群虚拟节点调度策略
步骤一：确认组件已安装且版本适用 虚拟节点开启调度策略依赖于Kube Scheduler以及ACK Virtual Node两个组件，且两个组件的版本需符合要求。请按照以下步骤确认组件安装情况以及版本。登录 容器服务管理控制台，在左侧导航栏选择 集群。在 ...
开启集群虚拟节点调度策略
步骤一：确认组件已安装且版本适用 虚拟节点开启调度策略依赖于Kube Scheduler以及ACK Virtual Node两个组件，且两个组件的版本需符合要求。请按照以下步骤确认组件安装情况以及版本。登录 容器服务管理控制台，在左侧导航栏选择 集群。在 ...
在Kubernetes集群中部署SchedulerX
wget https://schedulerx2.oss-cn-hangzhou.aliyuncs.com/helm/schedulerxchart-2.0.0.tgz 步骤二：安装schedulerx helm包 在分布式任务调度平台获取应用的接入参数。登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 ...
- 产品推荐
- 这些文档可能帮助您