SysOM内核层容器监控
该指标提供了与CPU调度相关的统计数据，包括在当前CPU的调度队列中等待被调度运行的进程的消耗时间，以及当前CPU中运行的时间片长度。sysom_cpu_dist gauge-查看节点的总体调度情况。该指标提供了从进程让出CPU到下一次被调度到CPU上运行...
开发PyODPS 2任务
注意事项 DataWorks支持可视化创建Python资源，如果您需要在 PyODPS节点中调用第三方包，请使用 独享调度资源组 并通过 运维助手 进行安装。DataWorks运维助手中安装的Python第三方包，仅支持在DataWorks独享调度资源组本地运行PyODPS任务...
开发PyODPS 3任务
注意事项 DataWorks支持可视化创建Python资源，如果您需要在 PyODPS节点中调用第三方包，请使用 独享调度资源组 并通过 运维助手 进行安装。DataWorks运维助手中安装的Python第三方包，仅支持在DataWorks独享调度资源组本地运行PyODPS任务...
开发PyODPS 3任务
注意事项 DataWorks支持可视化创建Python资源，如果您需要在 PyODPS节点中调用第三方包，请使用 独享调度资源组 并通过 运维助手 进行安装。DataWorks运维助手中安装的Python第三方包，仅支持在DataWorks独享调度资源组本地运行PyODPS任务...
在PyODPS节点中调用第三方包
背景信息 DataWorks支持可视化创建Python资源，若需要依赖开源第三方包，请使用 独享调度资源组 并通过 运维助手 进行安装。DataWorks运维助手中安装的Python第三方包，仅支持在DataWorks独享调度资源组本地运行PyODPS任务代码时引用，如果...
版本说明
可用性探测的调度间隔偶现大于配置的时间间隔问题。3.5.3 分类 说明 发布时间 2021-09-10 新特性 支持Exporter采集数据。HTTP可用性探测任务支持对HTTPS协议的重定向请求。HTTP可用性探测任务支持更多SSL Cipher。HTTP可用性探测任务默认与...
开发PyODPS 2任务
注意事项 DataWorks支持可视化创建Python资源，如果您需要在 PyODPS节点中调用第三方包，请使用 独享调度资源组 并通过 运维助手 进行安装。DataWorks运维助手中安装的Python第三方包，仅支持在DataWorks独享调度资源组本地运行PyODPS任务...
创建安全沙箱应用
说明 应用非亲和性调度的设置方式与亲和性调度相同，但是相同的调度规则代表的意思不同，请根据使用场景进行选择。调度容忍 容忍被应用于Pod，允许这个Pod被调度到相对应的污点上。调度到虚拟节点 设置是否调度到虚拟节点。如果您集群中...
启用节点自动伸缩
当集群的容量规划无法满足应用Pod调度时，您可以使用 节点自动伸缩 方案实现节点的自动扩缩。节点自动伸缩 适用于扩容规模较小（例如开启弹性的节点池数量少于20，或对应节点池中的节点数量少于100），工作负载批次较为稳定，以单次伸缩为...
手动升级GPU节点驱动
前提条件 获取集群KubeConfig并通过kubectl工具连接集群 操作步骤 步骤一：下线 节点与排空节点 执行以下命令，将待升级驱动的GPU节点设置为不可调度状态。kubectl cordon其中为节点名称。预期输出：node/<NODE_NAME>cordoned 执行以下命令...
如何使用Prometheus监控Windows
进程指标 进程是操作系统进行资源分配和调度的基本单位，也是操作系统结构的基础，您可以关注以下主要指标。指标名称 指标级别 指标来源 指标说明 进程CPU占用时间 Major WMI（PercentPrivilegedTime/PercentUserTime）该指标可以直观体现...
如何使用Prometheus监控Windows
进程指标 进程是操作系统进行资源分配和调度的基本单位，也是操作系统结构的基础，您可以关注以下主要指标。指标名称 指标级别 指标来源 指标说明 进程CPU占用时间 Major WMI（PercentPrivilegedTime/PercentUserTime）该指标可以直观体现...
Airflow调度Spark
Airflow是比较流行的开源调度工具，可以实现各类工作负载的DAG编排与调度。您可以通过 AnalyticDB MySQL Spark Airflow Operator、Spark-Submit命令行工具来实现Airflow调度Spark任务。本文介绍如何通过Airflow调度 AnalyticDB MySQL Spark...
服务运行
本文介绍使用容器服务ACK涉及的服务授权、访问、调度及资源分配等常见问题。如何部署集群的第一个应用？集群中的应用A如何访问应用B？如何将集群内的各节点资源合理的分配给不同容器组？如何将Pod调度到指定ECS节点？如何获取服务Service的...
节点异常问题排查
说明 若您要收集InodesPressure、DockerOffline、RuntimeOffline等类型的状态信息，需要在集群中安装node-problem-detector并创建事件中心，该功能在创建集群时默认选中。更多信息，请参见 创建并使用K8s事件中心。检查节点的事件 登录 ...
节点异常问题排查
说明 若您要收集InodesPressure、DockerOffline、RuntimeOffline等类型的状态信息，需要在集群中安装node-problem-detector并创建事件中心，该功能在创建集群时默认选中。更多信息，请参见 创建并使用K8s事件中心。检查节点的事件 登录 ...
什么是弹性高性能计算E-HPC
登录节点：可以进行软件安装、编译和调试，作业提交等操作。管控节点：包括调度器服务器和域账号服务器。调度器服务器：运行调度器客户端，管理调度节点，处理作业提交。域账号服务器：管理集群内的用户。计算节点：运行高性能计算作业，其...
创建有状态工作负载StatefulSet
此一致性与Pod相关，与被调度到哪个节点无关。稳定的持久化存储 通过VolumeClaimTemplate为每个Pod创建一个PV。删除或减少副本不会删除相关的存储卷。稳定的网络标志 Pod的 hostname 模式为：（StatefulSet名称）-（序号）。稳定的次序 ...
使用配置巡检检查集群工作负载
如果未配置的话，Pod有被调度到资源紧张的节点上的风险，可能会出现容器内进程运行缓慢的情况。修改Pod Spec，增加 resources.requests.cpu 字段。示例：cpuLimitsMissing 通过检查Workload的Pod Spec中是否未配置 resources.limits.cpu ...
安装GPU拓扑感知调度组件
激活GPU拓扑资源调度前，您需要安装并配置相关组件。本文介绍如何安装GPU拓扑感知调度相关组件以及在集群中开启GPU拓扑感知调度能力。前提条件 已创建ACK Pro集群，且集群的实例规格类型选择为 GPU云服务器。更多信息，请参见 创建...
使用调度器自定义参数
通过修改Kube Scheduler的自定义参数，您可以根据需要自定义调度器的行为，使得Pod的调度更符合您的期望。本文介绍如何使用调度器自定义参数。前提条件 已创建v1.20及以上版本的 ACK集群Pro版、ACK Edge集群Pro版 以及 ACK灵骏集群。具体...
通过ack-co-scheduler实现多级弹性调度
安装相关组件 使用多级弹性调度，您需要安装以下组件。ack-virtual-node：可选组件，如需使用弹性ECI能力，才需在注册集群中安装ack-virtual-node组件。ack-co-scheduler：通过该组件，您可以自定义ResourcePolicy CR对象，使用多级弹性...
GPU拓扑感知调度概述
本文简要描述了GPU拓扑分布情况，以及GPU拓扑感知调度的优势。GPU拓扑分布 下图为NVLink连接8个Tesla V100的混合立体网络拓扑。...相关文档 安装GPU拓扑感知调度组件 使用GPU拓扑感知调度（Tensorflow版）使用GPU拓扑感知调度（Pytorch版）
运维助手
若运行在独享调度资源组上的任务执行时需依赖第三方包，为保障任务可顺利执行，您需要先通过该资源组的运维助手功能，将相应的第三方包安装至独享调度资源组。DataWorks的运维助手提供了多种内置的第三方包，可直接安装使用，若内置的第三...
GPU节点卡型属性标签
在使用Kubernetes集群...相关文档 安装云原生AI套件的调度组件ack-ai-installer之后，您可以为GPU节点打上调度属性标签，帮助GPU节点启用共享GPU调度、GPU拓扑感知调度等能力。详细信息，请参见 GPU节点调度属性标签说明及标签值的切换方法。
GPU节点调度属性标签
安装云原生AI套件的调度组件ack-ai-installer之后，您可以为GPU节点打上调度属性标签，帮助GPU节点启用共享GPU调度、GPU拓扑感知调度等能力。本文介绍GPU节点调度属性标签及如何切换标签的值。GPU节点调度属性标签说明 标签ack.node.gpu....
场景：切换调度时区
在创建DataWorks工作空间时，您需要选择工作空间所在地域，...重要 数据集成同步进程时区属于 DataWorks工作空间当地Region时区，同步进程时间不随DataWorks调度时区进行切换，部分数据源同步时会和同步进程时区有关，也请您留意此处约束。
查询定时调度
使用命令行工具查看定时调度 在使用命令行工具创建定时调度前，您需要安装和配置阿里云命令行工具CLI。详细信息，请参见 什么是阿里云CLI？查看单个定时调度。（可选）执行以下命令查看该API的请求参数。aliyun fnf DescribeSchedule help ...
新建补数据任务
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
新建补数据任务
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
创建定时调度
使用命令行工具创建定时调度 在使用命令行工具创建定时调度前，您需要安装和配置阿里云命令行工具CLI。详细信息，请参见 什么是阿里云CLI？可选：执行以下命令查看创建定时调度API的请求参数。aliyun fnf CreateSchedule help 预期输出：...
周期任务补数据
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
周期任务补数据
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
Airflow调度DLA Spark作业
Airflow是比较流行的开源调度工具，可以实现各类工作负载的DAG编排与调度。您可以通过Spark-Submit和Spark-SQL命令行来实现Airflow调度Spark任务。DLA Spark提供了命令行工具包，支持通过Spark-Submit和Spark-SQL方式来提交Spark作业。您...
实现虚拟节点Pod可用区打散以及亲和调度
在 ACK Serverless集群Pro版 中，您可以通过Kubernetes原生调度语义实现分布式任务的跨可用区打散，以达到高可用区部署的要求，或者通过Kubernetes原生调度语义实现分布式任务在指定可用区中的亲和性部署，以达到高性能部署的要求。...
创建混合云集群
扩容前，请根据业务需要准备好自定义镜像，该自定义镜像中须安装有deadline或custom调度器。关于如何创建自定义镜像，请参见 使用实例创建自定义镜像。步骤一：创建混合云集群 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域...
删除定时调度
通过命令行工具删除定时调度 在使用前您需要安装和配置阿里云命令行工具CLI。可选：执行以下命令查看该API的请求参数。aliyun fnf DeleteSchedule help 预期输出：Alibaba Cloud Command Line Interface Version 3.0.45 Product:fnf...
修改定时调度
使用工具修改定时调度 在使用前您需要安装和配置阿里云命令行工具CLI。可选：执行以下命令查看该API的请求参数。aliyun fnf UpdateSchedule help 预期输出：Alibaba Cloud Command Line Interface Version 3.0.45 Product:fnf(FunctionFlow...
历史功能发布记录（2023年）
全部 无 云原生AI套件 GPU调度支持GPU节点动态划分MIG ACK托管集群 安装 云原生AI套件 的调度组件ack-ai-installer后，通过给GPU节点打上特殊标签，可以让GPU节点开启MIG能力以及动态划分。节点按最大支持MIG实例数上报MIG资源，每个Pod的...
Java任务
Java调度任务可以在您的应用进程中执行。本文介绍如何管理Java类型的任务。执行模式 Java任务类型支持单机、广播、可视化MapReduce、MapReduce和分片运行模式：单机：在同一个 groupId 下的机器随机挑一台执行。广播：同一个 groupId 下的...
- 产品推荐
- 这些文档可能帮助您