Dataphin的调度任务到了设置的调度时间状态还是等待中
问题描述 Dataphin的调度任务到了设置的调度时间状态还是等待中。问题原因 上游任务全部运行成功之后，实例就会进入等待状态。等待中分为等待调度时间和等待调度资源：任务到达了定时调度时间，但是由于调度资源不足，所以处于等待调度资源...
计费说明
微服务引擎MSE包含四种主流的微服务技术栈：微服务注册配置中心、微服务治理、云原生网关和分布式任务...分布式任务调度计费 关于分布式任务调度的计费项、计费方式、计费周期、计费公式以及产品价格详情，请参见 分布式任务调度计费概述。
ListInstances
BeginWaitTimeTime Long 1590416703313 实例任务开始等待调度的时间。DqcDescription String[{"projectName":"ztjy_dim","tableName":"dim_user_agent_manage_area_a","partition":"ds\u003d$[yyyy-mm-dd-1]"}]DQC分区规则串。NodeId Long ...
基础版商业化公告（2021年07月30日）
为提供更优质的服务，阿里云分布式任务调度SchedulerX将于2021年09月01日正式商业化。对于公测期间创建的实例，如果2021年09月01日00:00:00前没有释放，那么我们将默认您所创建的集群采用按量付费模式开始收费。开通商用实例 分布式任务...
联系我们
如果您在使用分布式任务调度SchedulerX的过程中有任何疑问和建议，欢迎使用钉钉搜索群号 23103656 加入钉钉群与我们交流。
命名空间管理
创建命名空间 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 命名空间。单击 创建命名空间。在 创建命名空间 面板，输入命名空间的 名称 和 描述，然后单击 确定。命名空间创建成功，会提示 创建成功。返回 命名空间...
自定义参数取值差异对比
例如，任务的定时调度时间为当天的 00:30，即时间格式为 yyyy-mm-dd 00:30:00。补数据功能 补数据时选择的业务日期和调度参数的替换结果保持一致。执行补数据时，调度参数替换结果为 选择的业务日期+1 天。例如，补数据选择的业务日期为 ...
One Time
One Time即一次性任务调度，配置完成后任务将在设置的时间点执行一次，执行完成后调度平台会自动清理任务，您无需在客户端执行删除任务的操作。一次性任务调度适用于订单超时未支付、自动关闭定时日历提醒等场景。本文介绍如何通过API创建...
创建定时任务CronJob
Fleet实例负责时间调度，生成任务Job，进而调度到关联的集群上运行。本文介绍如何在Fleet实例中创建定时任务CronJob。前提条件 已开启舰队管理功能。具体操作，请参见 开启舰队管理功能。舰队的Fleet实例已添加多个关联集群。具体操作，请...
One Time
One Time即一次性任务调度，配置完成后任务将在设置的时间点执行一次，执行完成后调度平台会自动清理任务，您无需在客户端执行删除任务的操作。一次性任务调度适用于订单超时未支付、自动关闭定时日历提醒等场景。本文介绍如何通过API创建...
为什么会空跑
场景一：周月实例空跑周期 任务定时时间为 定时每周几 或者“每月定时几号”跑的任务，任务只有在指定调度时间才会真实跑数据，在非指定时间内，非调度时间内其他时间会生成空跑实例，不会实际执行任务，该实例状态为 周月实例空跑周期。...
步骤三：设置任务调度策略并发布
本文介绍设置任务调度策略的操作流程。前提条件 已编写SQL语句。具体操作，请参见 步骤二：编写SQL分析语句。使用说明 修改已发布的SQL分析任务时，如果修改输出字段的名称和类型，修改前生成的存储表数据将被调度产出的新数据覆盖。如果...
Spring任务
完成上述步骤后，SchedulerX任务调度平台即可接管运行Spring的定时任务，支持为原生的Spring任务带来的各种可视化管控、任务业务日志查询、执行链路查看、任务执行通知报警等企业级能力。任务自动同步 原本已使用Spring定时任务且存量定时...
分布式任务调度概述
本文介绍分布式任务调度基本信息。
调度周期：日调度
场景：天任务对小时加工数据进行汇总 天任务依赖小时任务场景下，若上游小时任务调度参数配置存在偏移，导致小时任务每日第一个周期产出昨天最后一小时分区数据，天任务实际需要依赖的小时实例，变为小时任务当天第一个实例。该场景下，您...
Tablestore数据源
具体时间 设置Tablestore数据源发现调度任务的执行时间。schema前缀 设置Schema的前缀，即映射到DLA中的数据库名称的前缀。Schema的名称规则为“自定义前缀_Tablestore实例名”。生成到DLA中的表名与Tablestore实例的表的关联对象名相同。...
配置逻辑表调度属性
说明 在非指定的调度时间内，为保证下游实例正常运行，系统会每天生成实例后直接设置为运行成功，而不会真正执行任何逻辑，也不会占用资源。条件调度 可设置多组调度条件，系统按照从上往下的顺序进行条件判断，命中条件后即执行相应调度...
配置逻辑表调度属性
说明 在非指定的调度时间内，为保证下游实例正常运行，系统会每天生成实例后直接设置为运行成功，而不会真正执行任何逻辑，也不会占用资源。条件调度 可设置多组调度条件，系统按照从上往下的顺序进行条件判断，命中条件后即执行相应调度...
配置资源属性
周期任务的运行依赖于调度资源组，您可以在目标任务调度配置的资源属性区域，选择任务调度运行时需要使用的资源组。配置资源组 进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 资源属性 区域配置节点调度时使用的资源组。在 ...
和开源产品对比
在分布式任务调度领域中，Quartz、ElasticJob和XXL-JOB是广受欢迎的开源解决方案。为了更深入地理解分布式任务调度技术并全面评估SchedulerX在此领域的优势与特点，本文将对比SchedulerX与这些主流开源产品的特性与功能。项目 Quartz ...
API调度
您可以使用API触发任务调度。关于API触发的使用方式，请参见 服务接入点。
API调度
您可以使用API触发任务调度。关于API触发的使用方式，请参见 服务接入点。
集群任务限流
任务调度提供了两种限流类型：静态限流 静态限流通过代码配置限流规则，并可通过任务调度控制台动态调整限流速率。优势是在页面没有配置限流的情况下，也可以通过限流规则的初始值进行限速，但需要您手动指定限流器。框架提供了默认的限流...
规则管理
场景示例：场景一：任务的定时调度时间为1点，设置的未完成时间为2点，则1点时该任务开始运行，在2点时任务仍未结束运行，则发送报警。场景二：设置任务每天0:00~23:59每小时调度一次，当该任务未完成时间设置为12点时，则该规则每天都会...
创建资源
任务 在具体的应用下，任务和一段代码逻辑绑定，用来实现任务调度。任务是SchedulerX调度的最小单位，用来实现周期性的任务调度。工作流 在具体应用下，工作流用来实现任务的依赖编排。工作流是SchedulerX对任务进行依赖编排的封装，支持上...
OSS对象检查节点
任务配置说明 OSS对象检查节点与普通调度节点一样，需设置调度依赖、调度时间。调度配置及检测的相关说明如下：调度依赖配置 DataWorks上每个节点均需拥有上游依赖，若OSS对象检查节点无实际上游依赖，您可根据空间业务复杂度选择依赖 虚拟...
通知历史
当通知发生后，您可以按照应用ID、任务ID、通知类型、通知渠道、通知状态...查看通知历史 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏选择 通知管理>通知历史。在 通知历史 页面，通过筛选或搜索功能查找目标通知历史记录。
专业版公测（2022年01月26日）
阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测，本次公测带来了全新的可视化功能，兼容开源XXL-JOB任务，支持一次性任务，融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下，...
命名空间管理
创建命名空间 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 命名空间。单击 创建命名空间。在 创建命名空间 面板，输入命名空间的 名称 和 描述，然后单击 确定。命名空间创建成功，会提示 创建成功。返回 命名空间...
调度周期：分钟调度
分钟调度即每天指定的时间段内，调度任务按 N*指定分钟 的时间间隔运行一次。使用限制 分钟调度的时间间隔最小粒度只能设置为 5 分钟。配置示例 配置路径 您需要进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 调度配置>时间...
调度设置
若您已熟悉DataWorks的调度配置，则可参考本章节了解更多调度相关的高阶功能；若您才开始使用DataWorks的调度配置，请先前往 任务调度配置概述，了解调度配置的基础功能。
操作记录
操作步骤 登录 分布式任务调度平台，在顶部菜单栏选择地域，在左侧导航栏，单击 操作记录，在 操作记录 页面选择目标命名空间，查看操作记录。说明 操作记录 页面仅记录Schedulerx控制台操作，无OpenAPI相关记录。登录 操作审计控制台，在...
欠费说明
本文介绍分布式任务调度SchedulerX的欠费停机策略。欠费停机影响 欠费后，控制台无法新建调度任务。欠费超过7天后，控制台自动释放调度任务实例。结清账单后，被释放的实例不可恢复。如果欠费影响了业务，例如调度任务被禁用，需要加入钉群...
Spring任务
完成上述步骤后，SchedulerX任务调度平台即可接管运行Spring的定时任务，支持为原生的Spring任务带来的各种可视化管控、任务业务日志查询、执行链路查看、任务执行通知报警等企业级能力。任务自动同步 原本已使用Spring定时任务且存量定时...
什么是EMR Workflow
EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据湖仓，并为生产任务的稳定运行提供保障。产品优势 ...
SQL分析概述
功能说明 通过创建SQL分析任务，将数据存储表的数据作为查询对象，使用SQL语句配置分析任务，调度产出所需的数据至自定义存储表，为进一步挖掘数据的价值，提供分析数据的基础。您可以在 物联网平台控制台 对应实例下的 数据服务>分析洞察 ...
管理集群
网络管理 Service管理 Ingress管理 服务发现DNS 组件管理 管理组件 应用管理 工作负载 应用调度 配置管理 安全管理 安全 可观测性 日志管理 监控管理 调度 任务调度：任务调度概述 使用Gang scheduling 使用Capacity Scheduling 共享GPU...
分布式任务调度 SchedulerX 控制台集成到微服务引擎 ...
为了给您带来更加全面，稳定和丰富的产品体验，阿里云分布式任务调度 SchedulerX 控制台将于2024年01月31日集成到微服务引擎 MSE 产品控制台。变更详情 变更内容：SchedulerX 产品控制台新集成到微服务引擎 MSE 产品控制台，包括产品控制台...
配置RDS MySQL间的数据集成任务
本文以配置RDS MySQL间的数据集成任务为例，介绍数据集成任务的配置流程和注意事项。说明 新版DTS控制台暂不支持数据集成...执行结果 本次任务调度完成后，数据集成任务的状态变更为 已完成，DTS将等待下次调度时间并再次执行全量数据迁移。
产品功能
数据偏移时间 SchedulerX可以处理有数据状态的任务，在创建任务的时候设置调度时间，而实际上处理的数据时间可能和任务执行时间不一致，可以配置时间偏移，调度时间+时间偏移即数据时间。例如一个任务是每天00:30运行，但是实际上要处理前...
- 产品推荐
- 这些文档可能帮助您