创建定时调度
{"triggerTime":"2020-01-01T00:00:00Z","triggerName":"time-trigger","payload":{"key":"value"，"key_int":1 } } triggerTime：工作流被调度的时间，一个工作流在指定的时间点可能会被调度多次，您可以根据时间值做去重处理。...
配置并使用调度参数
调度参数是根据任务调度的业务时间及调度参数的取值格式自动替换为具体的值，实现在任务调度时间内参数的动态替换。本文为您介绍如何配置及使用调度参数，并以ODPS SQL节点为例，讲解调度参数配置完成后使用冒烟测试功能测试调度参数的替换...
实例生成方式：发布后即时生成实例
DataWorks会为您的周期调度节点自动生成自调度实例，支持 T+1次日生成、发布后即时生成 两种实例生成方式，即发布至生产环境后第二天自动调度及发布至生产环境后立即自动调度。本文为您介绍即时生成实例的规则及配置要点。注意事项 周期...
工作流使用案例
立即运行一批工作流，设置工作流业务时间的开始时间和调度周期，运行时系统会将指定调度规则的触发时间作为本工作流的业务时间，时间相关的变量将使用该时间进行计算。一次最多支持100个触发时间点。单机 确定。查看工作流运行记录 运行...
从Logstore到Logstore
调度时间范围 调度的时间范围，具体说明如下：某时间开始：指定第一个实例被调度的开始时间。特定时间范围：指定实例被调度的起止时间，即定时SQL任务仅在该时间范围内可被执行。重要 实例的调度时间必须在该范围内，超出该范围时，定时SQL...
时间属性配置说明
时间属性用于定义节点在生产环境的周期调度方式。您可通过调度配置的时间属性，配置节点生成周期实例的方式，实例调度周期与执行时间，是否支持重跑，任务执行超过多长时间自动退出等。本文为您介绍如何配置节点的调度时间属性。背景信息 ...
从Logstore到MetricStore
调度时间范围 调度的时间范围，具体说明如下：某时间开始：指定第一个实例被调度的开始时间。特定时间范围：指定实例被调度的起止时间，即定时SQL任务仅在该时间范围内可被执行。重要 实例的调度时间必须在该范围内，超出该范围时，定时SQL...
从MetricStore到MetricStore
调度时间范围 调度的时间范围，具体说明如下：某时间开始：指定第一个实例被调度的开始时间。特定时间范围：指定实例被调度的起止时间，即定时SQL任务仅在该时间范围内可被执行。重要 实例的调度时间必须在该范围内，超出该范围时，定时SQL...
配置任务流依赖检查节点
按天且开始调度时间为8点10分的任务流A依赖按天且开始调度时间为7点的调度任务流B的上一个调度周期，任务流A的依赖检查配置，开始不变，结束时间偏移点增加+1日、减少-1小时、减少-10分。说明 您可在当前配置页面上方，单击 预览，在 时间...
离线集成任务属性配置概述
对于离线集成任务，若需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。注意事项 系统仅支持 调度类型 为 周期性节点 的离线集成任务进行调度配置。...
离线集成任务属性配置概述
对于离线集成任务，若需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。注意事项 系统仅支持 调度类型 为 周期性节点 的离线集成任务进行调度配置。...
索引
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。报警常见问题 killed from server don't update progress more than 30s 任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout...
工作流调度
使用说明 工作流中的Job没有独立调度时间，跟随工作流的时间开始调度。工作流调度至少要有2个Job，且有依赖关系。如果只有一个Job，请直接使用任务管理。工作流支持跨应用编排，可以将不同应用下的任务进行编排。使用限制 当前只有Java任务...
索引
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。报警常见问题 killed from server don't update progress more than 30s 任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout...
查看统计图表
调度时间范围 调度的时间范围，具体说明如下：某时间开始：指定第一个实例被调度的开始时间。特定时间范围：指定实例被调度的起止时间，即定时SQL任务仅在该时间范围内可被执行。重要 实例的调度时间必须在该范围内，超出该范围时，定时SQL...
周期任务基本运维操作
周期任务是指在调度系统按照调度配置周期性自动调度的任务。您可以在 运维中心>周期任务 列表查看指定工作空间下的周期任务，并对任务进行运维操作，包括自动调度和手动运行周期任务、查看任务运行详情、暂停任务、下线任务等。本文为您...
创建及管理标签离线服务任务
Dataphin支持通过批量标签查询服务，输出标签表给到下游应用系统。...运维配置 调度周期 在特定时间范围内进行任务调度的周期。支持按日调度。标签离线任务将按照配置的调度时间按日调度运行。单击 发布，即可完成标签离线任务创建。
数据质量入门
步骤四：质量规则关联调度节点 通过关联调度节点，定义质量规则触发的方式及时间。当调度节点执行后，将会触发该节点关联的数据质量校验规则自动运行。步骤五：订阅质量规则 订阅数据质量规则，订阅后，您会第一时间收到校验结果的异常报警...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站...无需单独配置当前节点 定时调度时间，当前节点每日起调时间由业务流程根节点workshop_start的定时调度时间控制，即每日00:15后才会调度。配置调度依赖：确认 依赖的上游...
采集数据
配置调度时间：配置 调度周期 为 日；定时调度时间 为 00:15。配置重跑属性：配置为 运行成功或失败后皆可重跑。配置调度依赖：配置依赖的上游节点为 使用工作空间根节点。本教程中 WorkShop_Start 作为流程管控节点，无其他强上游依赖，...
Quota管理（新版）
配置时间计划：Quota计划的调度时间计划，购买包年包月MaxCompute实例后，默认不开启时间计划调度生效的 Default Quota计划。一旦配置时间计划，每个一级Quota的时间计划默认为0时整开始启动。如上示例，时间计划可以配置为0时整和8时整...
定时调度
云工作流 支持通过配置Cron表达式周期性或指定时间来调度工作流执行。本文介绍如何为 云工作流 配置定时调度。前提条件 事件总线（EventBridge）开通事件总线EventBridge并授权 云工作流（CloudFlow）已成功创建工作流。具体操作，请参见 ...
GetQuota-获取指定一级Quota组信息
currPlan string 按照调度计划生效的 quota 计划 planA currTime string currPlan 被调度的时间 0800 nextPlan string 按照调度计划将要生效的 quota 计划 planB nextTime string next_plan 被调度的时间 1700 oncePlan string 立即生效的 ...
ListQuotas-获取Quota列表
currPlan string 按照调度计划生效的 quota 计划 planA currTime string currPlan 被调度的时间 0800 nextPlan string 按照调度计划将要生效的 quota 计划 planB nextTime string next_plan 被调度的时间 1700 oncePlan string 立即生效的 ...
实例运行诊断
实例运行状态及实例运行流程如下：运行状态标识 标识描述 运行流程图 未运行 等待调度时间 限流中 等待调度资源 运行中 成功 失败 实例是否能成功运行，受其上游依赖、调度时间、资源、实例本身运行情况等多方因素影响。当实例运行失败或长...
实例运行诊断
实例运行状态及实例运行流程如下：运行状态标识 标识描述 运行流程图 未运行 等待调度时间 限流中 等待调度资源 运行中 成功 失败 实例是否能成功运行，受其上游依赖、调度时间、资源、实例本身运行情况等多方因素影响。当实例运行失败或长...
修改调度策略
对于已经配置完成的数据集成任务，如果由于业务需求变更需要重新调整调度策略，您可以参照本文的方法修改调度策略。前提条件 已创建数据集成任务，相关案例请参见 配置RDS MySQL间的数据集成任务。操作步骤 登录 数据传输控制台。在左侧...
任务管理
重刷调度任务 如果您的业务发生变更，如数据库增加一个字段或者上一个月数据有错误，需要把过去一段时间的任务重新执行一遍，可以重刷调度任务数据。说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度...
错误码
解决方案：请提交 工单，或联系Dataphin的支持人员协助处理。DPN.Bbox.MetaCenterServiceError 错误原因：元数据服务不可用。解决方案：请提交 工单，或联系Dataphin的支持人员协助处理。DPN.Bbox.ModelNotFound 错误原因：根据模型ID查询...
加工数据
配置定时调度时间：配置 调度周期 为日，无需单独配置当前节点 定时调度时间，当前节点每日调起时间由业务流程根节点WorkShop的定时调度时间控制，即每日00:15后才会调度。配置依赖关系：通过 代码自动解析 自动将产出ods_raw_log_d表数据...
加工数据
配置定时调度时间：配置 调度周期 为日，无需单独配置当前节点 定时调度时间，当前节点每日调起时间由业务流程根节点WorkShop的定时调度时间控制，即每日00:15后才会调度。配置依赖关系：通过 代码自动解析 自动将产出ods_raw_log_d表数据...
任务常见问题
如果任务执行时间比较长，上一次没运行完，下一次调度时间到了，则下一次会直接丢弃，不会运行也不会排队。如果设置任务实例并发数为2，上一次没运行完，下一次时间到了仍然可以运行一个实例，最多同时运行两个任务实例。如何设置一次性...
工作流调度
使用说明 工作流中的Job没有独立调度时间，跟随工作流的时间开始调度。工作流调度至少要有2个Job，且有依赖关系。如果只有一个Job，请直接使用任务管理。工作流支持跨应用编排，可以将不同应用下的任务进行编排。使用限制 当前只有Java任务...
BUILD
即某任务在该时间内调度，会出现因执行时间较长，超出该时间段的情况。示例 配置0~6点和18~24点调度BUILD任务。SET ADB_CONFIG RC_CSTORE_BUILD_SCHEDULE_PERIOD=`0,6;18,24`;配置BUILD调度优先级 BUILD调度是按照单表某个一级分区新增数据...
工作流调度
使用说明 工作流中的Job没有独立调度时间，跟随工作流的时间开始调度。工作流调度至少要有2个Job，且有依赖关系。如果只有一个Job，请直接使用任务管理。工作流支持跨应用编排，可以将不同应用下的任务进行编排。使用限制 当前只有Java任务...
自动轮转密钥
本文为您介绍如何对密钥管理服务（KMS）中的用户主密钥（CMK）进行自动轮转。密钥版本 KMS中的CMK支持多个密钥版本。每一个密钥版本是一个独立生成的密钥，同一个CMK下的多个密钥版本在密码学上互不相关。KMS通过生成一个新的密钥版本来...
CreateSecret
NextRotationDate String 2023-07-06T18:22:03Z 下一次轮转的时间。说明 当自动轮转开启时，返回该参数。SecretType String Rds 凭据类型。取值：Generic：通用凭据。Rds：RDS凭据。RAMCredentials：RAM凭据。ECS：ECS凭据。...
CreateSecret
NextRotationDate String 2023-07-06T18:22:03Z 下一次轮转的时间。说明 当自动轮转开启时，返回该参数。SecretType String Rds 凭据类型。取值：Generic：通用凭据。Rds：RDS凭据。RAMCredentials：RAM凭据。ECS：ECS凭据。...
通过OpenAPI创建、修改、删除离线同步任务
该参数与 DataWorks控制台 中，数据开发任务的“调度配置>时间属性>生效日期”配置的开始时间的毫秒时间戳对应。EndEffectDate Long 否 4155787800000 停止自动调度的时间戳，单位为毫秒。该参数与 DataWorks控制台 中，数据开发任务的...
通过OpenAPI创建、修改、删除离线同步任务
该参数与 DataWorks控制台 中，数据开发任务的“调度配置>时间属性>生效日期”配置的开始时间的毫秒时间戳对应。EndEffectDate Long 否 4155787800000 停止自动调度的时间戳，单位为毫秒。该参数与 DataWorks控制台 中，数据开发任务的...
- 产品推荐
- 这些文档可能帮助您