配置逻辑表数据延迟
在数据 开发 页面，选择您需配置数据延迟的逻辑表，进入调度配置信息页面。在调度配置页面，配置逻辑表的数据延迟。开启数据延迟，系统将自动重跑本逻辑表在 最大延迟天数 周期内的全部数据。可选择 1~15天。如下所示：说明 当前逻辑表无...
离线集成概述
如果您需要调度数据流，在 调度配置 区域，打开 开启调度 开关，配置调度。参数 说明 调度类型 选择调度类型：周期调度：周期性调度任务，例如一周执行一次任务。调度一次：在指定时间执行一次任务，仅需配置执行的具体时间。生效时间 选择...
离线集成概述
调度配置：调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。更多信息，请参见 配置离线管道调度。通道配置：通过离线集成管道通道配置，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道...
快速入门
在 任务流信息 页签下的 调度配置 区域，开启调度 开关，进行调度配置。本文以配置在2023-08-03至2023-08-31范围内，每周一、周四的0时进行调度举例。步骤四：运行任务流 任务流配置完成后，单击 试运行，任务流将从任务流中的第一个节点...
实例生成方式：发布后即时生成实例
说明 变更调度时间的生产任务，其下游实例会按照最新的调度配置，为新生成的实例和未替换的旧实例挂载依赖，小时、分钟各场景依赖情况，详情请参见 必读：复杂依赖场景调度配置原则与示例。待发布的节点版本，其实例生成方式为 发布后即时...
配置离线集成管道基本信息
您可以在离线集成管道编辑器属性对话框中查看离线集成任务的基本详细和进行调度配置，包括集成任务的名称、节点ID、节点类型，并配置对应责任人、描述等基本信息。本文将为您介绍离线集成任务属性的基本信息参数配置。操作步骤 请参见 离线...
配置离线集成管道基本信息
您可以在离线集成管道编辑器属性对话框中查看离线集成任务的基本详细和进行调度配置，包括集成任务的名称、节点ID、节点类型，并配置对应责任人、描述等基本信息。本文将为您介绍离线集成任务属性的基本信息参数配置。操作步骤 请参见 离线...
逻辑表配置概述
配置逻辑表调度属性 您可以通过配置逻辑表的调度配置，配置逻辑表的数据延迟、调度属性、上游依赖、参数配置、运行配置、资源配置信息。物化配置 物化配置用于配置维度和事实逻辑表的生命周期、分区字段及自定义参数，同时支持手动设定物化...
查看版本
操作 查看：查看相应版本节点的任务代码及调度配置。对比：单击相应版本后的对比，即可对比该版本与当前保存版本间的差异，快速明确版本变更内容。您也可以勾选两个不同版本对比版本差异。说明 最多仅支持对比两个版本间的差异。回滚：回滚...
Cron
6#3 每月的第三个周五10:15触发 Cron定时调度配置示例 在创建调度任务时可以使用Cron定时调度，创建调度任务的详细操作步骤请参见 创建调度任务。本文仅介绍在创建调度任务时如何配置Cron定时调度。进入 定时配置 页签，详情请参见 创建...
设置离线节点的调度信息
如果需要在开发环境场景上线后定时调度该场景中离线计算节点，则需要在开发环境场景上线前配置场景中离线节点的调度信息，调度配置在生产环境中生效。本文介绍如何设置开发环境场景中离线节点的调度信息。前提条件 开发环境场景画布流程中...
周期任务通用运维概述
周期任务是指调度系统按照调度配置自动定时运行的任务。本文为您介绍周期的脚本任务、明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）任务的通用功能，包括使用说明，支持的调度类型和相关功能说明。使用说明 仅生产环境运维中心支持...
离线模式调度配置
调度配置用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置流批一体任务的调度配置。操作步骤 请参见 离线模式配置入口，进入实时任务的 离线模式 配置页面。在...
离线模式调度配置
调度配置用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置流批一体任务的调度配置。操作步骤 请参见 离线模式配置入口，进入实时任务的 离线模式 配置页面。在...
查看及管理离线计算任务列表
批量调度配置 支持同时修改多个计算任务的调度配置信息。批量调度配置仅对周期任务生效；批量配置后，选中的周期任务原有的调度属性配置将被覆盖，请谨慎操作；若选中周期任务已配置条件调度，批量设置为空跑或暂停将批量关闭条件调度。...
查看及管理离线计算任务列表
批量调度配置 支持同时修改多个计算任务的调度配置信息。批量调度配置仅对周期任务生效；批量配置后，选中的周期任务原有的调度属性配置将被覆盖，请谨慎操作；若选中周期任务已配置条件调度，批量设置为空跑或暂停将批量关闭条件调度。...
管理任务流实例
在 任务流信息 页签下，配置任务流名称、责任人、相关人员、调度配置等属性。更多信息，请参见 配置基础属性 和 配置时间调度、配置事件调度。在 变量配置 页签下，配置任务流变量（时间变量）、任务流常量。配置变量的操作，请参见 变量。...
周期任务通用运维概述
周期任务是指调度系统按照调度配置自动定时运行的任务。本文为您介绍周期的脚本任务、明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）任务的通用功能，包括使用说明，支持的调度类型和相关功能说明。使用说明 仅生产环境运维中心支持...
数据集成
同步任务调度配置 节点依赖关系 离线同步任务 离线同步任务的上游任务：由于同步任务可依赖平台侧血缘，因此，您可根据工作空间业务复杂性，选择挂载依赖至 工作空间根节点或 虚拟节点，即由工作空间根节点调度当前节点执行，还是由虚拟...
导出开源引擎任务
Cron表达式：部分场景存在表达式剪裁或表达式功能不支持等情况，您需自行检查调度配置的定时时间是否满足要求。调度时间介绍，详情请参见 时间属性配置说明。Python节点：DataWorks没有单独的Python节点，Python节点目前是转换为Python文件...
新建BLINK_SQL任务
离线模式（Bate）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务对应的资源队列及引擎...
新建BLINK_SQL任务
离线模式（Bate）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务对应的资源队列及引擎...
创建业务流程
当然，您也可以进入节点的调度配置界面，来手动编辑节点依赖关系。详情请参见 调度依赖配置指引。列表模式下新建的节点，其业务流程可根据代码血缘关系来设置节点调度依赖，详情请参见 调度依赖配置指引。开发业务逻辑 DataWorks将引擎能力...
查看及管理离线集成任务列表
调度配置 支持同时修改多个离线集成任务的调度配置信息。批量调度配置仅对周期任务生效；批量配置后，选中的周期任务原有的调度属性配置将被覆盖，请谨慎操作；若选中周期任务已配置条件调度，批量设置为空跑或暂停将批量关闭条件调度。...
查看及管理离线集成任务列表
调度配置 支持同时修改多个离线集成任务的调度配置信息。批量调度配置仅对周期任务生效；批量配置后，选中的周期任务原有的调度属性配置将被覆盖，请谨慎操作；若选中周期任务已配置条件调度，批量设置为空跑或暂停将批量关闭条件调度。...
新建Flink_SQL任务
离线模式（Beta）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务生产环境和开发环境...
数据同步概述
配置同步任务的调度参数，详情请参见 调度配置。说明 系统仅支持周期性节点的同步任务进行调度配置。编写代码的方式构建代码任务，以实现数据同步的流程：可选：上传应用函数资源，详情请参见 上传资源及引用。可选：新建脚本中使用到函数...
步骤三：引入数据
在 调度配置 页面，配置 调度依赖 区域参数，其他参数保持默认。参数 描述 上游依赖 单击 添加根节点 为上游依赖。单击 确定。步骤四：提交和发布离线单条管道脚本 单击页面右上方的 图标，提交管道脚本。在 提交备注 对话框，输入备注信息...
步骤三：引入数据
在 调度配置 页面，配置 调度依赖 区域参数，其他参数保持默认。参数 描述 上游依赖 单击 添加根节点 为上游依赖。单击 确定。步骤四：提交和发布离线单条管道脚本 单击页面右上方的 图标，提交管道脚本。在 提交备注 对话框，输入备注信息...
数据同步概述
配置同步任务的调度参数，详情请参见 调度配置。说明 系统仅支持周期性节点的同步任务进行调度配置。编写代码的方式构建代码任务，以实现数据同步的流程：可选：上传应用函数资源，详情请参见 上传资源及引用。可选：新建脚本中使用到函数...
新建FLINK_SQL任务
离线模式（Bate）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务生产环境和开发环境...
新建FLINK_SQL任务
离线模式（Bate）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务生产环境和开发环境...
加工数据
2.配置调度属性 通过以下配置实现调度场景下，每日00:15待上游 ods_raw_log_d 节点将存储于OSS的user_log.txt数据同步至MaxCompute的ods_raw_log_d表后，可触发当前 dwd_log_info_di 节点对ods_raw_log_d表数据进行加工，加工结果写入dwd_...
Hologres开发：周期性调度
在新建的节点页面，单击右侧导航栏的 调度配置，配置调度参数。详情请参见 调度参数概述。具体配置如下所示：配置基础属性。在 基础属性 区域，将 参数 赋值为时间节点。配置时间属性。在 时间属性 区域，配置 时间属性 为 正常调度。其余...
加工数据
2.配置调度属性 通过以下配置实现调度场景下，每日00:15待上游 ods_raw_log_d 节点将存储于OSS的user_log.txt数据同步至MaxCompute的ods_raw_log_d表后，可触发当前 dwd_log_info_di 节点对ods_raw_log_d表数据进行加工，加工结果写入dwd_...
规范建模任务提交说明
变更内容信息包括 基本信息、对象信息、表结构信息、物理信息、表关系信息、计算逻辑、调度配置、调度依赖、运行配置、字段约束。前置检查 提交维度/事实逻辑表任务时，将进行以下前置校验，未正确配置所有校验项将不支持提交。下图以 维度...
规范建模任务提交说明
变更内容信息包括 基本信息、对象信息、表结构信息、物理信息、表关系信息、计算逻辑、调度配置、调度依赖、运行配置、字段约束。前置检查 提交维度/事实逻辑表任务时，将进行以下前置校验，未正确配置所有校验项将不支持提交。下图以 维度...
采集数据
配置调度时间：配置 调度周期 为 日；定时调度时间 为 00:15。配置重跑属性：配置为 运行成功或失败后皆可重跑。配置调度依赖：配置依赖的上游节点为 使用工作空间根节点。本教程中 WorkShop_Start 作为流程管控节点，无其他强上游依赖，...
任务冻结与解冻
说明 在数据开发（DataStudio）调度配置的调度类型里选择暂停调度或者正常调度，需重新提交发布，才会冻结或解冻生产调度的周期任务。冻结与解冻周期实例 冻结周期实例只作用于该实例，如果只解冻周期实例，周期任务仍然是冻结状态，那么...
开发PyODPS 2任务
使用调度参数 单击节点编辑区域右侧的 调度配置，在 参数 区域配置自定义参数，PyODPS节点与SQL节点定义变量的方式不同，详情请参见 调度参数配置。与DataWorks中的SQL节点不同，为了避免影响代码，PyODPS节点不会在代码中替换类似${param_...
- 产品推荐
- 这些文档可能帮助您