导出DMS操作日志到阿里云日志服务
周期调度 配置项 说明 调度周期 选择调度任务的周期：日：按每日一次的频率执行任务调度，需要配置每日调度的具体时间。周：以周为周期，每个指定天执行一次任务调度，需要配置指定时间和具体时间。月：以月为周期，每个指定天执行一次任务...
Hologres开发：周期性调度
这里通过{bizdate}参数控制分区键值，在调度系统中自动赋值完成周期性调度。关于参数的配置，请参见DataWorks文档 DataWorks调度配置。其中，insert的分区数据必须和分区键（本文示例为ds）的值保持一致，否则会报错。在HoloStudio中，单击...
配置任务流依赖检查节点
系统默认开始、结束时间是基于任务流运行时间进行偏移：对于定时触发的任务流，业务时间的计算基于调度时间计算的。对于手动触发的任务流，业务时间的计算基于手动触发的那一刻。依赖配置示例：按天且开始调度时间为7点的任务流A依赖按天且...
Dataphin天调度任务如何依赖小时调度任务
概述 本文为您介绍Dataphin中天调度任务依赖小时任务调度是如何调度的。详细信息 判断下游天任务与上游小时任务是否是同周期。同周期：判断上游小时任务是否是自依赖：上游小时任务如果不是自依赖（即小时任务本身没有配置依赖上周期）,则...
删除流量调度策略
DeleteCenInterRegionTrafficQosPolicy 接口属于异步接口，即系统会先返回一个 RequestId，但该流量调度策略并未删除完成，系统后台的删除任务仍在进行。您可以调用 ListCenInterRegionTrafficQosPolicies 接口查询流量调度策略的状态。当...
CreateSchedule-创建一个定时调度
创建一个定时调度。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
调度Pod到x86架构的虚拟节点
对于 ACK Serverless集群，所有Pod均运行在虚拟节点（默认x86架构）上，无需进行调度；对于ACK集群，即混合使用标准节点（ECS）和虚拟节点（ECI，基于VK）的模式下，默认会将Pod调度到ECS节点，您可以根据需要将Pod调度到虚拟节点。本文...
YARN调度器
简介 Hadoop YARN的核心组件是ResourceManager，负责集群资源管理与调度，而ResourceManager组件的核心是调度器，负责统筹集群资源，满足应用的资源需求。调度器不仅需要优化整个集群的资源布局，避免热点等问题对应用的影响，最大程度利用...
UpdateSchedule-更新一个定时调度
更新一个定时调度。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
DescribeSchedule-获取一个定时调度
获取一个定时调度信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
BUILD
配置BUILD调度优先级 BUILD调度是按照单表某个一级分区新增数据量排序下发任务，新增数据量大的分区先下发任务，根据下发时间的先后排序执行任务。当需要按业务紧急程度调度BUILD任务时，可以通过Hint或者 SET ADB_CONFIG 调整单表或多表...
使用ECI弹性调度
ECI弹性调度是阿里云提供的弹性调度策略。您可以在部署服务时通过添加Annotations来声明只使用ECS或ECI弹性资源，或者是在ECS资源不足时自动申请ECI资源。通过ECI弹性调度可以满足您在不同工作负载的场景下对弹性资源的不同需求。本文介绍...
ListSchedules-获取定时调度列表
获取定时调度列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
弹性伸缩概述
例如，HPA是典型的调度层弹性组件，可以调整应用的副本数，调整的副本数会改变当前负载占用的调度容量，从而实现调度层的伸缩。节点伸缩（资源层弹性）：在集群的容量规划不能满足集群调度容量时，会扩容节点资源，进行调度容量的补充。两...
虚拟节点调度方案对比及介绍
针对虚拟节点，ACK Serverless集群基础版 和 ACK Serverless集群Pro版 支持的调度方式不同，且有其特定的使用场景，例如调度到指定操作系统或架构类型的虚拟节点上、跨可用区亲和等。您可以依据调度场景以及集群类型，参考本文选择合适的...
E-HPC集群调度器插件
什么是调度器插件 E-HPC作为一款PaaS平台，集成了常用的开源调度器来提供平台级服务。当您的业务需要迁移到云上时，往往需要将云下的调度器集成至云上，但因HPC行业调度器众多，且不同调度器有多种定制版本，会出现E-HPC内置调度器无法满足...
DeleteSchedule-删除一个定时调度
删除一个定时调度。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
资源伸缩和系统扩展
例如，HPA是典型的调度层弹性组件，通过HPA可以调整应用的副本数，调整的副本数会改变当前负载占用的调度容量，从而实现调度层的伸缩。资源层弹性，主要是集群的容量规划不能满足集群调度容量时，会通过弹出ECS或ECI等资源的方式进行调度...
GetNodeParents
请求参数 名称 类型 是否必选 示例值 描述 Action String 是 GetNodeParents 系统规定参数。取值：GetNodeParents。RegionId String 是 cn-shanghai 地域的信息，通常是服务所在的地域。例如，华东2（上海）是cn-shanghai，华北3（张家口）...
GetNodeChildren
请求参数 名称 类型 是否必选 示例值 描述 Action String 是 GetNodeChildren 系统规定参数。取值：GetNodeChildren。RegionId String 是 cn-shanghai 地域信息，通常是服务所在的地域。例如，华东2（上海）是cn-shanghai，华北3（张家口）...
XxlJob任务
背景信息 XXL-JOB是一个开箱即用的轻量级分布式任务调度系统，其核心设计目标是开发迅速、学习简单、轻量级、易扩展，在开源社区广泛流行，已在多家公司投入使用。XXL-JOB开源协议采用的是GPL，因此云厂商无法直接商业化托管该产品，各大中...
计算资源使用
若作业特征匹配Quota规则，作业禁止调度到该Quota运行，会优先调度到所属项目的默认计算Quota运行，如果当前项目的默认计算Quota也是该Quota，那么会调度到当前Region下最早创建的Quota运行（包括按量计费Quota）。重要 排他模式规则和禁止...
任务管理
本文介绍如何在任务管理页面对调度任务进行一系列操作。创建调度任务 重要 创建任务前，请确保您已经创建了任务分组。更多信息，请参见 应用管理。登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务...
提交作业
标准输出路径、错误输出路径 定义Linux系统的stderr、stdout输出重定向路径，包含输出文件名。stdout：标准文件输出路径。stderr：错误文件输出路径。集群用户必须有该路径的可写权限，默认按照调度器设置生成输出文件。添加环境变量 可...
概述
任务调度 SOFAStack 任务调度提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化地对金融企业不同业务系统的任务进行统一调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和运...
ListNodesByOutput
请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ListNodesByOutput 系统规定参数。取值：ListNodesByOutput。ProjectEnv String 是 PROD 调度运维中心的环境标识，PROD表示生产环境，DEV表示开发环境。Outputs String 是 aaaaa...
通过控制台提交作业
作业指提交到E-HPC集群进行高性能计算的基本工作单元，包括Shell脚本、可执行文件等，具体作业执行顺序根据您设置的队列以及调度器决定。E-HPC管理控制台提供了作业相关的提交作业、停止作业、查看作业状态等功能，本文介绍如何使用E-HPC...
自定义弹性资源优先级调度
自定义弹性资源优先级调度是阿里云提供的弹性调度策略。您可以在应用发布或扩容过程中，自定义资源策略（ResourcePolicy），设置应用实例Pod被调度到不同类型节点资源的顺序。同时，在缩容过程中按照原调度顺序逆序缩容。重要 自调度器版本...
SetSchedulerInfo-设置调度器信息
SchedName string 是 调度器名，取值范围：pbs pbs19 slurm slurm19 slurm20 说明 调度器为 pbs、pbs19 时，PbsInfo.N.SchedInterval、PbsInfo.N.JobHistoryDuration、PbsInfo.N.ResourceLimit、PbsInfo.N.AclLimit 中至少一个参数为必选；...
创建流量调度策略下队列的配置
如果您需要对不同类型和优先级的网络流量进行细致管理，以确保关键业务流量的性能并遵守服务级别协议，您可以调用CreateCenInterRegionTrafficQosQueue接口创建流量调度策略下队列的配置。接口说明 CreateCenInterRegionTrafficQosQueue ...
共享GPU调度概述
关于如何安装和使用共享GPU调度，请参考：安装共享GPU调度组件 运行共享GPU调度示例 除此以外，还有一些进阶能力，您可以根据业务需求选择：通过共享GPU调度实现多卡共享 通过共享GPU调度实现算力分配 配置共享GPU调度节点选卡策略 配置...
数据开发常见问题
调度依赖常见问题 配置须知 什么是调度依赖？为什么要设置调度依赖？DataWorks上如何设置调度依赖？下游任务依赖上游任务的运行规则是什么？节点的输出名称的作用是什么？一个节点可以有多个输出名称吗？哪些场景不支持设置调度依赖？典型...
RunServiceSchedule-执行设备服务调度
180.166.45.146 ServiceAction string 是 调度服务操作。枚举类型，取值范围：容器化场景：Start：选择并激活一个可调度云设备，启动服务 Stop：结束并释放云设备 Console：Uuid 处于调度中状态时，进行命令交互 裸金属/虚机场景：...
创建业务流程
说明 由于DataWorks的调度依赖主要保障的是调度节点定时更新的表数据，通过节点调度依赖保障下游取数没有问题，所以不是DataWorks平台上调度更新的表，平台无法监控。当存在非周期性调度生产数据的表，有节点select这类表数据时，您需要...
GetSchedulerInfo-查询指定集群的调度器配置
ehpc-hz-FYUr32*Scheduler object[]是 调度器详细信息。SchedName string 是 调度器名称。取值范围：pbs pbs19 slurm slurm19 slurm20 pbs 返回参数 名称 类型 描述 示例值 object RequestId string 请求 ID。BBC2F93D-003A-49C4-850C-B826...
PAI-TF概述
PAI-TF的作业都是基于底层的分布式调度系统动态调度至不同机器。当您提交PAI-TF作业时，无需担心是否需要提前申请GPU物理主机，PAI-TF所需要的GPU资源随作业的提交动态分配，随作业的结束动态释放。全局计算调度 当您在使用MaxCompute计算...
产品相关问题
分布式调度：提高系统的可用性、伸缩性，且调度与业务的分离，让研发更专注业务逻辑的开发。多种任务类型：简单任务，集群任务，消息任务，流式任务，满足不同场景需求。丰富的管理功能：包括定时触发、事件触发、手动触发、优雅停止、断点...
公共调度资源组计费说明：按量付费
DataWorks为您提供公共调度资源组用于任务调度运行。公共调度资源组的计费方式为按量计费，本文为您介绍公共调度资源组的按量计费详情。背景信息 概念介绍 公共调度资源组是DataWorks提供的公共资源组的一种，计费方式为按量计费。所有阿里...
服务定时自动部署
如果您在步骤一中引入了Designer全局变量，请参考 示例2：定时调度参数替换，在节点调度配置中将全局变量的配置替换成所需的系统变量。步骤三：部署后查看定时更新的服务版本 查看定时部署的模型服务版本，具体操作步骤如下。登录 PAI控制...
XxlJob任务
背景信息 XXL-JOB是一个开箱即用的轻量级分布式任务调度系统，其核心设计目标是开发迅速、学习简单、轻量级、易扩展，在开源社区广泛流行，已在多家公司投入使用。XXL-JOB开源协议采用的是GPL，因此云厂商无法直接商业化托管该产品，各大中...
- 产品推荐
- 这些文档可能帮助您