交通调度-网络流最大流问题
行业背景 交通调度是指对交通资源进行合理的调度和管理，以实现交通系统的高效运行和流量控制。如何安排调度，以帮助 提高交通运输的效率，降低成本。这个优化问题也可以运用数学规划的方法来建模和求解。例如：已知有七个站点，每个站点都...
HTTPDNS调度IP的证书
问题描述 HTTPDNS调度IP的证书 解决方案 当使用HTTPS请求调度服务时，我们会提供主机名为203.107.1.1的有效证书（无论使用哪个IP请求）。适用于 HTTPDNS
在ACK集群部署多租户任务调度管理
为解决以上问题，您可以使用ACK集群来管理大规模集群的管理系统，其较为完善的生态为企业打造大规模任务调度系统扫清了障碍，简化了企业集群管理系统搭建的流程。用户角色 企业的任务调度系统中通常有两类角色，分别为提交任务的开发人员...
调度参数支持的格式
调度参数是DataWorks任务调度时使用的参数，可根据您配置的调度参数取值规则，在每次任务运行时自动替换为真实的取值，实现任务调度时间内参数的动态替换。本文为您介绍调度参数支持的格式及相关使用。背景信息 您可在代码中通过${变量名} ...
通过OpenAPI创建、修改、删除离线同步任务
由于DataWorks调度系统的规则，cron表达式有以下限制：最短调度间隔时间为5分钟。每天最早调度时间为0点5分。CycleType String 否 NOT_DAY 调度周期的类型，包括NOT_DAY（分钟、小时）和DAY（日、周、月）。该参数与 DataWorks控制台 中，...
通过OpenAPI创建、修改、删除离线同步任务
由于DataWorks调度系统的规则，cron表达式有以下限制：最短调度间隔时间为5分钟。每天最早调度时间为0点5分。CycleType String 否 NOT_DAY 调度周期的类型，包括NOT_DAY（分钟、小时）和DAY（日、周、月）。该参数与 DataWorks控制台 中，...
服务端发布记录
本文介绍分布式任务调度SchedulerX产品发布的功能变更，包括新增功能、功能优化、重要问题修复等，帮助您了解SchedulerX的发布动态。发布记录 2024-02-29 功能名称 变更类型 功能描述 相关文档 Java版本SDK v1.11.1 修复 Netty、Logback等...
在ACK专有版集群中使用共享GPU调度
如您需要在 ACK专有版集群 中使用共享GPU调度基础版，请参见...基础版迁移专业版 安装共享GPU调度组件 运行共享GPU调度组件 使用共享GPU调度实现仅共享不隔离能力 使用共享GPU调度实现cGPU算力分配策略 解决专业版集群升级共享GPU调度失效问题
产品相关问题
解决大规模分布式任务统一调度的问题，助力企业能够更加迅速地满足业务需求。典型的应用场景包括金融行业结息处理、日切处理、余额缓冲记账、政务数据批处理等。任务调度支持哪些任务类型？任务调度支持的基本任务类型包括：简单任务、集群...
Dataphin逻辑表任务运行时间超长
问题描述 Dataphin逻辑表任务运行时长达到了50+小时，为什么运行时长会那么长时间？问题原因 该逻辑表任务存在多个物化节点或者所有上游任务没有正常调度导致的。解决方案 该逻辑表任务存在两个物化节点；且存在两个上游依赖。查看逻辑表...
Dataphin的调度任务到了设置的调度时间状态还是等待中
问题描述 Dataphin的调度任务到了设置的调度时间状态还是等待中。问题原因 上游任务全部运行成功之后，实例就会进入等待状态。等待中分为等待调度时间和等待调度资源：任务到达了定时调度时间，但是由于调度资源不足，所以处于等待调度资源...
云盘存储卷FAQ
解决方案 原因1解决方案：确保多Pod不能引用同一个PVC，解决Pod引用PVC的问题。原因2解决方案：请通过 容器服务管理控制台 的 组件管理 页面，升级csi-plugin组件到大于等于v1.26.3-796c9dc-aliyun的版本，并再次确认csi-plugin未直接挂载/...
DMS调度XIHE SQL
解决方案：DMS任务编排 DMS的任务编排功能即可解决上述问题，它并不依赖数据库内核的事件调度能力，而是一个外部独立的任务编排与调度系统。任务编排功能的特点如下：支持多种数据库引擎（MySQL、Oracle、PostgreSQL、SQL Server等）和多种...
EMR数据开发（旧版）停止全面支持公告
停止全面支持时间 2023年9月30日0点 影响 您在停止全面支持时间点前创建的数据开发（旧版）项目不会受到影响，可正常使用EMR数据开发（旧版）模块，包括运行作业和工作流调度，但阿里云不再提供EMR数据开发（旧版）的用户答疑、问题解决和...
概念原理
使用任务分片可以缩短任务执行时间，同时也可以解决单机计算能力上限的问题，并降低部分任务失败对整体系统的影响。任务拓扑 任务拓扑（Topology）是由许多通过事件触发的任务的集合，描述了任务依赖关系。子任务可以并发执行或根据条件...
数据开发常见问题
Spark：Spark常见问题 外部表：外部表常见问题 安全管理相关：权限管理常见问题 安全配置常见问题 运维管理：Information Schema常见问题 小文件优化及作业诊断常见问题 其他运维常见问题 下载数据相关：如何下载超过1万条的表数据？...
通过ack-co-scheduler组件实现协同调度
Gang scheduling 阿里云容器服务ACK基于新版的Kube-scheduler框架实现Gang scheduling的能力，解决原生调度器无法支持All-or-Nothing作业调度的问题。使用以下模板向集群中提交Tensorflow分布式作业。关于如何运行Tensorflow的分布式作业，...
什么是阿里云CDN
链路质量系统 链路质量探测系统会实时监测缓存系统中的所有节点和链路的实时负载以及健康状况，并将结果反馈给调度系统，调度系统根据用户请求中携带的IP地址解析用户的运营商和区域归属，然后综合链路质量信息为用户分配一个最佳接入节点...
基础术语
中文 英文 释义 简单...使用任务分片可以缩短任务执行时间，同时也可以解决单机计算能力上限的问题，并降低部分任务失败对整体系统的影响。Cron 表达式 Cron expression 固定格式的字符串，用来指定一个时间点或者一个重复触发的时间间隔。
任务触发与执行问题
任务执行超时 问题现象 出现 TIMEOUT 错误。问题原因 客户端处理超时。解决方法 查看超时时间是否配置太小。建议根据任务的实际执行情况设置合理的超时时间。查看客户端错误日志 common-error.log。自定义参数不存在 问题现象 出现 javax....
使用Gang scheduling
ACK基于新版的Kube-scheduler框架实现Gang scheduling的能力，解决原生调度器无法支持All-or-Nothing作业调度的问题。本文介绍如何使用Gang scheduling。重要提示 请预留足够资源：使用弹性节点池时请保证弹性节点池的最大资源量以及节点...
使用Gang scheduling
ACK基于新版的Kube-scheduler框架实现Gang scheduling的能力，解决原生调度器无法支持All-or-Nothing作业调度的问题。本文介绍如何使用Gang scheduling。重要提示 请预留足够资源：使用弹性节点池时请保证弹性节点池的最大资源量以及节点...
等待资源
本文为您介绍等待资源的相关问题。为什么会出现等待资源？为什么任务一直在等待gateway调度资源？为什么数据集成任务一直显示wait？为什么会出现等待资源？问题现象 调度将任务下发到对应执行引擎上，此过程可能会出现以下等待资源问题：...
共享GPU调度概述
如下图：显存隔离 如果没有GPU隔离模块参与，那么共享GPU调度仅能够保证多个Pod运行在一张GPU卡上，并不能解决Pod之间相互影响的问题。以下是一个显存使用的例子。假设Pod1需要申请5 GiB显存使用，Pod2需要申请10 GiB显存使用。在没有GPU...
历史功能发布记录（2023年）
支持操作系统内核层的容器监控可观测能力，为您提供更可靠、透明的容器引擎层，助力您更顺利地进行容器化迁移，解决了因容器引擎层的不透明性而导致的故障排查困难问题。全部 使用SysOM定位容器内存问题 支持单独运行集群检查 新增OpenAPI ...
产品优势
短信服务可以为您提供以下服务优势，带给您安全可靠的发送体验。快速稳定 国内短信秒级可达，99%到达率。国内短信三网合一专属通道，与工信部携号转网平台实时互联。400+通道支持，可实现1秒切换...高效的调度算法解决高峰时段的业务压力。
步骤二：编写SQL分析语句
本文介绍编写SQL分析语句的操作流程。前提条件 已创建SQL分析任务：您需在SQL数据分析工作台，根据业务需求，编写SQL...如果运行失败，可在 运行日志 页签下，根据报错信息，解决问题后，重新运行。后续步骤 步骤三：设置任务调度策略并发布
调度概述
ACK Scheduler是ACK基于Kubernetes Scheduling Framework扩展机制，针对不同任务负载、不同弹性资源的统一调度系统。ACK Scheduler支持不同弹性资源的混合调度、异构资源的精细化调度、批量计算的任务调度等，提升应用的性能和集群整体资源...
任务常见问题
如果以上方案无法解决问题，可以调试ThreadContainer.start方法。如果class.forName报错，class又确实存在，可能是业务方使用了某些框架，导致classLoader不一致，可以通过设置 SchedulerxWorker.setClassLoader 解决。任务失败，报错...
2020年
本文介绍了SchedulerX产品在2020年发布涉及的新增功能、功能优化、重要问题修复及对应的文档。客户端发布记录 1.2.3.1，2020-12-16 变更类型 功能描述 相关文档 优化 优化问题：调整默认依赖的log4j2至2.15.0版本。无 变更类型 功能描述 ...
其他常见问题
调度记录的重试问题 问题现象 在任务的调度记录里，有的记录提供了 重试 按钮，可以重试，有的则不能。问题原因 同一个任务，如果有多次执行记录，那么只有最新的执行记录是有重试选项的，因为旧的记录已经没有意义。基于消息的任务中，...
ack-kube-queue
ack-kube-queue是云原生AI套件提供的任务队列组件，主要围绕着Kube Queue任务队列，结合调度器和Quota系统，提供队列管理、优先级调度、使用弹性配额等功能，帮助您优化Kubernetes中的AI/ML工作负载和批处理工作负载的管理效率和调度性能。...
Fixed rate
Fixed rate专门用来做定期轮询，可以解决该问题，且表达式简单，但不支持秒级别。Fixed rate定时配置示例 在创建调度任务时可以使用Fixed rate定时调度，创建调度任务的详细操作步骤请参见 创建调度任务。本文仅介绍在创建调度任务时如何...
Java SDK
本文介绍SchedulerX产品的Java SDK发布的功能变更，包括新增功能、功能优化、重要问题修复等，帮助您了解SchedulerX的Java SDK发布动态。发布记录 1.11.4，2024-03-20 功能名称 变更类型 功能描述 相关文档 工作流 新增 JobContext可以获取...
Fixed rate
Fixed rate专门用来做定期轮询，可以解决该问题，且表达式简单，但不支持秒级别。Fixed rate定时配置示例 在创建调度任务时可以使用Fixed rate定时调度，创建调度任务的详细操作步骤请参见 创建调度任务。本文仅介绍在创建调度任务时如何...
CPU拓扑感知调度
Kubernetes虽然有CPU Manager解决方案处理以上问题，但是因为CPU Manager特性是节点级别的CPU调度选择，所以无法在集群维度中选择最优的CPU Core组合。同时CPU Manager特性要求Pod是Guaranteed时（Pod中的每个容器必须指定CPU请求和CPU限制...
历史记录
本文介绍了SchedulerX产品在2022年以前发布涉及的新增功能、功能优化、重要问题修复及对应的文档，帮助您了解SchedulerX的历史发布动态。服务端 2021-12-01 新特性 新增API：指定机器。新增API：查询工作流。2021-06-02 新特性 支持应用...
什么是云迁移中心
调度中心 为解决批量迁移过程中迁移带宽不足、源端压力过载等一系列问题，CMH的调度中心支持分组、分时、自定义条件等调度策略，从而统一管理迁移任务的并发问题。说明 截图为调度中心中开启调度的调度组 产品应用场景 云厂商更换迁移 可能...
Dataphin中补数据实例处于等待调度状态
问题描述 这个调度任务是一天三次，所以补数据之后也有三个实例。但是前两个都执行成功了，最后一个一直是等待调度。问题原因 补数据时间选择的是T-1，调度时间设置的是12点，15点，18点。指定补数据时间点是16点，所以12点和15点的补数据...
任务实例状态异常
本文为您介绍实例异常排查的相关问题。运维中心周期任务没有找到该任务 有周期任务，但是周期实例一个都没有 有周期任务，有其他周期实例，但是这个任务没有产生周期实例 有周期任务，有周期实例但未运行 任务运行必须满足的条件有哪些？运...
- 产品推荐
- 这些文档可能帮助您