云原生AI套件概述

异构计算集群概述 开启集群GPU监控 共享GPU调度概述 AI任务调度 多种调度策略支持:针对AI分布式训练等典型批量任务类型,ACK调度器扩展Kubernetes原生调度框架,支持实现多种典型批量调度策略,包括Gang Scheduling(Coscheduling)、FIFO...

ack-ai-installer

ack-ai-installer是增强ACK Pro版集群和 ACK Edge集群Pro版 调度能力的Device Plugin(设备插件)的组件集合,支持结合ACK Scheduler(ACK基于Kubernetes Scheduling Framework扩展机制,针对不同任务负载、不同弹性资源的统一调度系统)...

资源包(专业版)推出公告

阿里云分布式任务调度SchedulerX专业版于2023年02月01日推出任务调度CU预付费资源包,帮助您以更优惠的价格享受等量的任务调度CU,从而减少费用支出。更多信息,请参见 资源包(专业版)。

联系我们

如果您在使用分布式任务调度SchedulerX的过程中有任何疑问和建议,欢迎使用钉钉搜索群号 23103656 加入钉钉群与我们交流。

开通SchedulerX

背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 登录 分布式任务调度平台。首次使用并登录分布式任务调度平台,在弹出的对话框中单击 开通。在 分布式任务管理 页面,单击 立即购买。在 确认订单 页面 ...

基本概念

sudo权限组:适用于需要管理集群的管理员,除提交、调试作业外,还可以执行sudo命令进行安装软件、重启节点等操作。作业 作业指提交到E-HPC集群进行高性能计算的基本工作单元,包括Shell脚本、可执行文件等。调度调度器指集群上调度作业...

工作流调度

使用说明 工作流中的Job没有独立调度时间,跟随工作流的时间开始调度。工作流调度至少要有2个Job,且有依赖关系。如果只有一个Job,请直接使用任务管理。工作流支持跨应用编排,可以将不同应用下的任务进行编排。使用限制 当前只有Java任务...

DataWorks任务

SchedulerX可支持定时调度DataWorks任务,并将DataWorks任务与其他任务在SchedulerX上进行混合依赖编排,完成相应的定期任务数据处理。前提条件 SchedulerX客户端升级至1.3.4及以上版本。接入客户端,将具备访问DataWorks(需开通企业版)...

命名空间管理

创建命名空间 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏,单击 命名空间。单击 创建命名空间。在 创建命名空间 面板,输入命名空间的 名称 和 描述,然后单击 确定。命名空间创建成功,会提示 创建成功。返回 命名空间...

依赖关系

配置调度依赖前您需先了解以下内容 什么是调度依赖 为什么要设置调度依赖 DataWorks上如何设置调度依赖?哪些场景不支持设置调度依赖?不需要依赖的表如何删除?调度依赖配置常见问题 提交节点报错:当前节点依赖的父节点输出名不存在 提交...

CreateRouteStrategy-创建路由策略

label名称,若 targetType为"worker",则列表中配置 worker的IP地址 targetType:调度目标类型,可配置为"label"或"worker",表示调度到指定label的机器上或者调度到指定IP的机器上 返回参数 名称 类型 描述 示例值 object Schema of ...

通知历史

当通知发生后,您可以按照应用ID、任务ID、通知类型、通知渠道、通知状态...查看通知历史 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏选择 通知管理>通知历史。在 通知历史 页面,通过筛选或搜索功能查找目标通知历史记录。

HTTP任务

高级配置参数说明如下:配置名称 说明 时间偏移 数据时间相对于调度时间的偏移,可以在调度时从上下文获取该值。时区 可以根据实际情况选择不同时区,包括一些常用国家或地区,也包括标准的GMT表达方式。第三步:报警配置 HTTP任务支持错误...

常见问题

如何进行秒级别调度?某个时间点没有调度怎么办?SchedulerX如何设置超时时间?为什么实例停止之后还会执行?如何进行任务管理高级配置?机器繁忙(all workers are busy)该怎么办?任务常见问题 如何接入链路追踪?任务常见问题 应用发布...

报警常见问题

在使用SchedulerX时,您可能会收到一些报警。本文介绍如何处理这些报警。killed from server 报警信息 报警说明 这个报警通常是因为配置了超时自动清除。don't update progress more ...如果是发布或者重启导致的,可以配置任务失败自动重试。

Golang SDK接入

本文介绍如何将Golang应用通过SDK快速接入SchedulerX。控制台配置 请参见 创建应用,创建一个普通应用,并参见...后续步骤 应用接入SchedulerX完成后,即可在分布式任务调度平台创建调度任务。更多信息,请参见 创建调度任务。相关文档 Golang

配置eci-profile

eci-profile可以实现以下三个功能:ECI Scheduler 在混合使用ECI和普通节点的场景下,一般可以通过配置Pod Label、配置Namespace Label和配置ECI弹性调度等方式将Pod调度到ECI,但这些方式均需要对存量资源做一定的修改,无法做到零侵入。...

Spring任务

通过对接SchedulerX任务调度可快速实现企业化运用的支持。前提条件 客户端1.7.10及以上版本 采用Spring Boot模式接入SchedulerX平台具体操作,请参见 Spring Boot应用接入SchedulerX。接入指南 接入配置 以Spring Boot接入模式为例,应用...

配置eci-profile

eci-profile可以实现以下三个功能:ECI Scheduler 在混合使用ECI和普通节点的场景下,一般可以通过配置Pod Label、配置Namespace Label和配置ECI弹性调度等方式将Pod调度到ECI,但这些方式均需要对存量资源做一定的修改,无法做到零侵入。...

配置eci-profile

eci-profile可以实现以下三个功能:ECI Scheduler 在混合使用ECI和普通节点的场景下,一般可以通过配置Pod Label、配置Namespace Label和配置ECI弹性调度等方式将Pod调度到ECI,但这些方式均需要对存量资源做一定的修改,无法做到零侵入。...

分布式任务调度平台(SchedulerX)服务等级协议

本文介绍分布式任务调度平台(SchedulerX)的服务等级协议。关于服务等级协议,请参见 分布式任务调度平台(SchedulerX)服务等级协议。

专业版商业化公告(2022年05月24日)

阿里云分布式任务调度SchedulerX专业版将于2022年06月25日正式进行商业化。公测期实例转商用说明 对于公测期间在分布式任务调度SchedulerX上创建的专业版应用,您需要根据实际需求进行处理。继续使用:您无需进行任何操作。从2022年06月25...

XxlJob任务

SchedulerX 2.0兼容XXL-JOB任务接口,支持@XxlJob 新注解和@JobHandler 老注解方式,您不需要修改代码,即可将XXL-JOB任务在SchedulerX 2.0平台上进行调度。背景信息 XXL-JOB是一个开箱即用的轻量级分布式任务调度系统,其核心设计目标是...

产品优势

高可用 采用高可用架构和任务多备份机制,经历阿里集团多年双十一、容灾演练,可以保障机房宕机时调度任务不受影响。安全防护 多层次安全防护:支持HTTPS和VPC访问,基于阿里云的多层安全防护,可有效防止恶意攻击。多租户隔离机制:支持多...

配置调度规则

在容器服务K8s集群中创建或部署应用时,您可以根据实际需求修改应用实例的调度规则,将Pod实例尽可能部署在多个可用区和多个节点,来增强应用的可用性。本文介绍如何配置调度规则。在创建应用时配调度规则 登录 EDAS控制台,在左侧导航栏,...

配置示例:MaxCompute

配置关联调度 如果您需要在生产链路上监控离线数据质量,需要将数据质量规则与产出表数据的调度节点进行关联:产出表数据的调度节点必须发布后才可以关联调度。关联前,请确保您在关联的两个工作空间中,同时拥有 管理员、开发 或 运维 中...

索引

如何进行秒级别调度?某个时间点没有调度怎么办?SchedulerX如何设置超时时间?为什么实例停止之后还会执行?如何进行任务管理高级配置?机器繁忙该怎么办?任务执行失败,且没有错误信息 如何接入链路追踪?如何设置一次性任务?应用发布...

应用管理

创建应用 在创建调度任务前,您需要先创建应用。步骤一:基本配置 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏,单击 应用管理。在 应用管理 页面,选择目标命名空间然后单击 创建应用。在 基本配置 向导页,输入 应用名...

专业版公测(2022年01月26日)

阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测,本次公测带来了全新的可视化功能,兼容开源XXL-JOB任务,支持一次性任务,融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下,...

调度集群管理概述

Dataphin支持连接不同调度集群,并将所有集群可用于调度的资源进行统一管理,使每个租户可以使用不同集群的资源用于创建自定义资源组,从而解决跨Region数据传输以及资源隔离等问题。使用限制 当前仅支持基于最新架构部署的客户使用调度...

在Kubernetes集群中部署SchedulerX

使用场景 使用SchedulerX调度K8s Job有如下优势。可在线编辑脚本Pod K8s Job常用于数据处理和运维场景,一般以脚本实现居多。原生的使用方式需要将脚本打包到镜像里,在YAML文件中配置脚本命令。如果要修改脚本,需要重新构建镜像和发布。...

托管节点池节点自动恢复

如果打开了 当节点故障时重启节点 开关,则重启ECS实例。KubeletNotReady(PLEG)PLEG健康检查失败,导致节点NotReady。中 180s 重启containerd或Docker。重启kubelet。如果打开了 当节点故障时重启节点 开关,则重启ECS实例。...

接入问题

部署应用机器的区域和调度控制台创建的命名空间所在区域不一致。例如:对应命名空间创建于杭州Region,但当前应用配置的接入区域为公网。解决方案:登录 分布式任务调度平台。在 应用管理 页面,单击 接入配置 然后核对相关信息。...

查看费用账单

操作步骤 登录 分布式任务调度平台。在顶部菜单栏选择 费用>用户中心。在左侧导航栏,单击 账单管理>账单详情。根据需要单击相应的页签,然后查看消费情况。账单流水 页签:展示所选账期内的订单列表,您可以根据订单号精确搜索。明细账单 ...

Spring应用接入SchedulerX

您可以为您的Spring应用快速接入SchedulerX,实现分布式任务调度能力。前提条件(可选)已创建命名空间。具体操作,请参见 创建命名空间。已创建资源。具体操作,请参见 创建资源。Spring应用客户端接入SchedulerX 在应用程序的 pom.xml ...

查看调度资源大盘

调度资源大盘展示Dataphin集群已配置调度资源的使用及分配情况。您可以查看并分析全局资源总量配置及单个任务资源分配的情况,可以有效地提升资源利用率并降低成本,同时也能减少因调度资源紧张而造成大量任务堆积的可能性,增强平台的稳定...

如何使单应用支持十万以上的定时任务

应用场景 常见应用场景是每个定时任务调度时间都不一样,无法通过MapReduce分布式任务解决(MapReduce分布式任务每个子任务调度时间是一致的)。物联网智能开关 智能开关可以设置定时开启、关闭,是由用户自定义设置的,所以每个开关的定时...

金融云分布式任务调度平台(SchedulerX)服务等级协议

本文介绍金融云分布式任务调度平台(SchedulerX)的服务等级协议。关于服务等级协议,请参见 金融云分布式任务调度平台(SchedulerX)服务等级协议。

Spring应用接入SchedulerX

您可以为您的Spring应用快速接入SchedulerX,实现分布式任务调度能力。前提条件(可选)已创建命名空间。具体操作,请参见 创建命名空间。已创建资源。具体操作,请参见 创建资源。Spring应用客户端接入SchedulerX 在应用程序的 pom.xml ...

Golang SDK接入

本文介绍如何将Golang应用通过SDK快速接入SchedulerX。控制台配置 请参见 创建应用,创建一个普通应用,并...后续步骤 应用接入SchedulerX完成后,即可在分布式任务调度平台创建调度任务。更多信息,请参见 创建调度任务。相关文档 Golang任务
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
批量计算 音视频通信 视觉计算服务 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用