开启集群虚拟节点调度策略
步骤一：确认组件已安装且版本适用 虚拟节点开启调度策略依赖于Kube Scheduler以及ACK Virtual Node两个组件，且两个组件的版本需符合要求。请按照以下步骤确认组件安装情况以及版本。登录 容器服务管理控制台，在左侧导航栏选择 集群。在 ...
开启集群虚拟节点调度策略
步骤一：确认组件已安装且版本适用 虚拟节点开启调度策略依赖于Kube Scheduler以及ACK Virtual Node两个组件，且两个组件的版本需符合要求。请按照以下步骤确认组件安装情况以及版本。登录 容器服务管理控制台，在左侧导航栏选择 集群。在 ...
在ECS实例内访问网站提示“Nginx 502 bad gateway”...
php-cgi进程数不够用 如果在已安装Nginx且可以正常访问网站的环境中，运行一段时间才后出现“Nginx 502 Bad Gateway”错误，则可能是php-cgi进程数不够用导致。此时，您需要修改/usr/local/php/etc/php-fpm.conf 配置文件，将文件中 pm.max...
注册调度集群
Dataphin支持连接不同集群的机器并统一管理对应的调度资源。本文介绍如何注册调度集群。操作步骤 使用元仓租户下的 超级管理员 或 系统管理员 账号登录Dataphin。在Dataphin首页，单击顶部菜单栏中的 管理中心。按照下图操作指引，进入 ...
配置集群连接
步骤四：执行安装命令 在目标集群导入下载的描述文件并解压后执行安装命令，完成应用的安装与授权。安装命令如下：重要 执行安装命令前，请联系Dataphin部署运维团队获取自定义资源组引用的镜像文件，并在目标集群的指定机器中导入镜像。每...
通过ack-co-scheduler组件实现协同调度
本文介绍通过为注册集群安装ack-co-scheduler组件的方式，以实现在您的本地集群中使用阿里云容器服务ACK的调度能力，让您能够便捷地使用容器服务对于大数据、AI等应用扩展出的差异化能力，提高应用的运行效率。前提条件 已创建注册集群，并...
新增和使用独享调度资源组
您可根据业务场景需求选择购买合适规格的独享调度资源组，用于任务的调度运行。购买独享资源组后，在实际使用前您还需进行网络绑定、白名单等配置操作。本文为您介绍从购买至使用独享调度资源组的全流程与步骤详情。前提条件 购买和使用独...
为K8s应用配置虚拟节点
在Pod进行调度时，如果没有匹配的Node节点（例如已有的ECS work节点资源不足），那么将会由virtual-kubelet-autoscaler接管，把调度失败的Pod重新调度到ECI（虚拟节点）上。安装组件，请参见 安装virtual-kubelet-autoscaler。方式六：配置...
ECS环境自动安装探针
初次安装时，系统将提示您重启应用进程，重启后即可完成探针接入。当页面显示 探针安装成功，监控数据已就绪 时表示探针已安装成功。说明 初次安装时需要等待1分钟左右。如果重启后页面状态显示 目标Java进程未找到，需要确认重启时是否...
使用ack-descheduler组件对Pod进行调度优化
为了解决实际运行中集群资源无法充分利用或浪费的问题，可以使用ack-descheduler组件对集群的Pod进行调度优化，使部分不合理的Pod能够重新调度到合适的节点上。本文介绍如何使用ack-descheduler组件优化Pod调度。前提条件 已创建ACK集群...
使用负载感知调度
ACK集群Pro版 调度器的负载感知调度功能会根据节点的实际负载情况，将Pod优先调度到负载较低的节点，以实现节点负载均衡，降低节点故障风险。前提条件 已安装ack-koordinator组件，且版本为1.1.1-ack.1及以上。具体操作，请参见 ack-...
如何处理进程监控报警规则未被触发问题？
如果您想查看非Top5的进程数，则需要先添加进程监控，再为其设置报警规则（进程监控的指标为(Agent)process.count_processname），当进程数满足报警触发条件时，您可以收到报警通知。操作步骤 检查主机是否已安装云监控插件，且 argusagent...
常见问题
移动调度中心 SDK 内置有移动调度中心域名的 IP 硬编码，防止 App 首次安装后运营商的 DNS 不可用。Q：移动调度中心域名获取IP的策略有哪些？A：移动调度中心域名获取自身域名 IP 的策略如下：从移动调度中心后台配置中获取，移动调度中心...
视频专区
主题 视频 相关文档 云原生AI套件概述 云原生AI套件概述 如何安装ACK云原生AI套件 安装云原生AI套件 如何使用ACK共享GPU调度 共享GPU调度概述 Fluid数据加速 数据加速Fluid概述 如何安装Arena并使用Arena提交Gang Scheduling任务 安装Arena...
虚拟节点调度方案对比及介绍
针对虚拟节点，ACK托管集群（Pro版和基础版）和 ACK专有集群 支持的调度方式不同，且有其特定的使用场景，例如直接指定Pod只调度到虚拟节点、跨可用区打散等。您可以依据调度场景以及集群类型，参考本文选择合适的调度方式。常见虚拟节点...
ack-kube-queue
ack-kube-queue是云原生AI套件提供的任务队列组件，主要围绕着Kube Queue任务队列，结合调度器和Quota系统，提供队列管理、优先级调度、使用弹性配额等功能，帮助您优化Kubernetes中的AI/ML工作负载和批处理工作负载的管理效率和调度性能。...
配置共享GPU调度节点选卡策略
已安装GPU资源查询工具。策略介绍 在共享GPU调度中，如果节点存在多张GPU卡，从节点中挑选GPU卡分配给Pod时，有两种策略可以考虑：Binpack：默认策略，调度系统先分配完节点的一张GPU卡后，再分配节点上另一张GPU卡，避免节点出现GPU资源...
安装共享GPU调度组件
本文介绍如何在GPU节点上安装共享GPU组件和GPU资源查询工具，实现GPU的调度和隔离能力。前提条件 共享GPU调度目前已实行收费。在使用共享GPU调度前，需开通云原生AI套件。具体收费信息，请参见 云原生AI套件计费说明。关于云原生AI套件的更...
创建守护进程集工作负载DaemonSet
通过kubectl命令行创建 DaemonSet会忽略节点的无法调度状态，您可以设置以下参数将Pod调度至指定的节点上：参数 描述 nodeSelector 只调度到匹配指定标签的节点上。nodeAffinity 设置节点亲和性。根据节点标签将Pod调度到指定节点上，但...
ACK对接ECI
ECI能为Kubernetes提供基础的容器Pod运行环境，但业务间的依赖、负载均衡、弹性伸缩、定期调度等能力依然需要Kubernetes来提供。本文为您介绍阿里云容器服务Kubernetes版（简称ACK）如何与ECI对接，使用ECI作为Pod的运行资源。对接方式 ECI...
配置共享GPU调度cGPU算力调度策略
步骤一：查看是否已安装共享GPU组件 配置共享GPU算力分配策略时，未安装共享GPU组件和已安装共享GPU组件的操作方式不同，因此需要您确认集群是否已安装共享GPU组件。登录 容器服务管理控制台，在左侧导航栏选择 集群。在 集群列表 页面，...
如何将任务调度应用优雅下线
本文介绍如何将任务调度应用优雅下线。背景信息 在实际业务场景下，定时任务持续地按固定频率在应用进程中执行。当应用在发布重启时，进程需暂时下线。如果直接关闭应用，正在进行中的定时任务将被中断，可能导致数据不完整或其他问题。为...
计费概述
本文介绍分布式任务调度SchedulerX的各计费项及其计费规则。基本概念 任务类型：调度任务的类型。包含单机任务和非单机任务（广播、分片、并行和网络任务等）。任务调度总量：通过SchedulerX配置并启用的分布式任务调度总规模，单位为CU...
如何创建秒级调度任务
秒级任务适合对实时性要求比较高的业务，例如不停做轮询的准实时业务，通过内存网格和秒级调度，可以让您不停地处理海量的数据。本文介绍如何创建秒级调度任务并将设置固定延迟。SchedulerX的秒级别任务属于定时调度类型，适用于简单Java...
Fixed rate
Cron原生不支持无法被60整除的分钟间隔调度，例如每40分钟执行一次的任务。为解决此类精细化定时需求，可采用Fixed rate定期轮询机制，它能够简洁地表达非标准时间间隔的定期任务执行，且表达式简单，但不支持秒级别。Fixed rate定时配置...
任务管理
本文介绍如何在任务管理页面对调度任务进行一系列操作。创建调度任务 重要 创建任务前，请确保您已经创建了任务分组。更多信息，请参见 应用管理。登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务...
产品功能
SchedulerX主要提供调度、执行和运维三方面的功能。多种表达式的定时调度 Crontab：支持Unix Crontab表达式，详情请参见 Cron。不支持秒级别。Fixed rate：Crontab必须被60整除，不支持其它数量级时间间隔的任务，如每隔40分钟的定时任务。...
作业编辑
Spark使用模式 Spark-Submit和Driver端 进程情况 Yarn-Client模式 作业提交进程使用LOCAL模式 Spark-Submit和Driver端是在同一个进程中。作业提交进程是Header节点上的一个进程，不受YARN监控。作业提交进程使用YARN模式 作业提交进程是...
API调度
您可以使用API触发任务调度。关于API触发的使用方式，请参见 服务接入点。
Second delay
Second delay支持1~60秒间隔的秒级延迟调度，即每次任务执行完成后，间隔秒级时间再次触发调度。Second delay具有以下优势：高可靠：SchedulerX的秒级别任务具有高可靠的特性，如果某台机器宕机了，可以在30秒内在另一台机器上重新运行。...
欠费说明
本文介绍分布式任务调度SchedulerX的欠费停机策略。欠费停机影响 欠费后，控制台无法新建调度任务。欠费超过7天后，控制台自动释放调度任务实例。结清账单后，被释放的实例不可恢复。如果欠费影响了业务，例如调度任务被禁用，需要加入钉群...
Cron
6#3 每月的第三个周五10:15触发 Cron定时调度配置示例 在创建调度任务时可以使用Cron定时调度，创建调度任务的详细操作步骤请参见 创建调度任务。本文仅介绍在创建调度任务时如何配置Cron定时调度。进入 定时配置 页签，详情请参见 创建...
如何重刷数据
重刷调度任务 如果您的业务发生变更，如数据库增加一个字段或者上一个月数据有错误，需要把过去一段时间的任务重新执行一遍，可以重刷调度任务数据。说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度...
名词解释
调度时间 JobInstance每次调度的时间叫做调度时间，JobProcessor可以根据 context.getScheduleTime()获取。数据时间 SchedulerX可以处理有数据状态的任务。创建任务的时候可以填数据偏移。例如一个任务是每天00:30运行，但是实际上要处理上...
将调度失败的Pod重新调度到ECI
在Pod进行调度时，如果没有匹配节点（例如已有ECS Worker节点资源不足）时，该组件会接管调度任务，将调度失败的Pod重新调度到ECI（虚拟节点）上。重要 virtual-kubelet-autoscaler组件的安装会占用节点Pod资源。如果您的集群类型为 ACK...
产品功能
通过SchedulerX可以管理定时调度任务、查询任务执行记录和运行日志。本文介绍SchedulerX调度、执行和运维三个方面的功能。定时调度 Crontab 支持Unix Crontab表达式，不支持秒级别调度。更多信息，请参见 Cron。Fixed rate Crontab必须被60...
如何重刷数据
重刷调度任务 如果您的业务发生变更，如数据库增加一个字段或者上一个月数据有错误，需要把过去一段时间的任务重新执行一遍，可以重刷调度任务数据。说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴自研的分布式任务调度平台，兼容开源XXL-JOB、ElasticJob、Spring Schedule，K8s Job，支持Cron定时、一次性任务、可视化工作流任务编排和分布式跑批，具有高可用、可观测、可运维和低延时等能力。...
资源包（专业版）
背景信息 SchedulerX针对 任务调度CU 推出了一种预付费资源包模式，帮助您以更优惠的价格享受同等的任务调度CU数量，从而减少费用支出。资源包类型与定价 SchedulerX目前只提供一种类型的资源包，即任务调度CU资源包，用于抵扣SchedulerX...
操作记录
您可以通过操作记录页面，查看应用分组、调度任务和流程的操作记录。操作步骤 登录 分布式任务调度平台，在顶部菜单栏选择地域，在左侧导航栏，单击 操作记录，在 操作记录 页面选择目标命名空间，查看操作记录。说明 操作记录 页面仅记录...
- 产品推荐
- 这些文档可能帮助您