创建全域数据表质量规则
权限说明 超级管理员、质量管理员支持为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人支持在自己所负责的监控对象下为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人、普通用户需要额外具备全域数据表所在...
配置AnalyticDB MySQL Spark节点
在 调度配置 区域，打开 开启调度 开关，配置调度。具体配置，请参见 任务编排概述。可选：发布或下线任务流。具体操作，请参见 发布或下线任务流。其他操作 您可在任务执行完成后，单击页面右上方的 前往运维，进入运维中心查看任务流的...
Data Lake Analytics节点
单击节点编辑区域右侧的 调度配置，配置节点的调度属性，详情请参见 配置基础属性。配置资源属性时，请选择调度资源组为已经和Data Lake Analytics网络连通的独享调度资源组，作为周期调度时使用的资源组。保存并提交节点。重要 您需要设置...
OSS对象检查节点
如果您需要周期性执行创建的节点任务，可以单击节点编辑页面右侧的 调度配置，根据业务需求配置该节点任务的调度信息：配置任务调度的基本信息，详情请参见 配置基础属性。配置时间调度周期、重跑属性和上下游依赖关系，详情请参见 配置...
EDAS应用接入SchedulerX
单击 任务调度配置 区域 通知配置 右侧的 图标，可跳转至 任务调度>应用管理 页面中对应的应用分组的 通知配置 编辑页面进行通知配置。在 任务调度>应用管理 页面，单击对应的应用分组 操作 列的 查看实例，在 连接实例 对话框查看实例列表...
创建数据表质量规则
权限说明 超级管理员、质量管理员支持为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人支持在自己所负责的监控对象下为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人、普通用户需要额外具备有Dataphin数据表...
创建数据表质量规则
权限说明 超级管理员、质量管理员支持为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人支持在自己所负责的监控对象下为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人、普通用户需要额外具备有Dataphin数据表...
UpdateFile
该参数与 DataWorks控制台 中，数据开发任务的“调度配置>调度依赖”配置为“上一周期”后，依赖项选择”其他节点“时配置的内容对应。InputList String 否 project_root,project.file1,project.001_out 文件依赖的上游文件的输出名称。...
DescribeDefaultAlgorithms-获取默认算法信息
scategory experimentValue string 算法配置项实验值 300 name string 算法配置项 name（说明：系统默认算法，控制台需要通过美杜莎获取，用户自定义算法，后端会返回 name）I2I算法 defaultValue string 算法默认值 对于 i2i,hot,new 等...
Dataphin补数据任务空跑调度了是什么原因
补数据选择的是业务日期，而调度周期配置的是调度日期，如果补数据时选择的业务日期是20220930，那么对应的调度日期就是20221001，而调度周期是月调度，并没有包含每个月的1日，所以补数据选择20220930时任务是空跑运行的。解决方案 在调度...
就绪检测节点
调度配置 调度配置 属性用于设置就绪检测节点生产环境场景的调度周期等参数，关键参数说明如下：参数 说明 定时调度 依赖本节点上一周期调度 选中后，则本次的调度依赖本节点上一周期调度的结果。生效日期 该节点周期调度的有效时间段，...
新建BLINK_SQL任务
离线模式（Bate）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务对应的资源队列及引擎...
新建BLINK_SQL任务
离线模式（Bate）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务对应的资源队列及引擎...
就绪检测节点
调度配置 调度配置 属性用于设置就绪检测节点生产环境场景的调度周期等参数，关键参数说明如下：参数 说明 定时调度 依赖本节点上一周期调度 选中后，则本次的调度依赖本节点上一周期调度的结果。生效日期 该节点周期调度的有效时间段，...
任务编排之电商打标
在 调度配置 区域，打开 开启调度 开关，配置调度。具体配置，请参见 调度周期配置表。发布任务流。任务流发布后，此任务流会根据设置的调度周期自动执行。单击画布左上角的 发布。在 发布 对话框中输入 备注 信息，并单击 确认，发布任务...
PostgreSQL节点
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在节点编辑页面右侧导航栏的 调度配置>调度参数，为该变量赋值。调度参数支持的格式及...
创建CDH Impala节点
步骤三：配置任务调度 如果您需要周期性执行创建的节点任务，可以单击节点编辑页面右侧的 调度配置，根据业务需求配置该节点任务的调度信息：配置任务调度的基本信息，详情请参见 配置基础属性。配置时间调度周期、重跑属性和上下游依赖...
Oracle节点
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在节点编辑页面右侧导航栏的 调度配置>调度参数，为该变量赋值。调度参数支持的格式及...
新建Flink_SQL任务
离线模式（Beta）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务生产环境和开发环境...
SQL Server节点
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在节点编辑页面右侧导航栏的 调度配置>调度参数，为该变量赋值。调度参数支持的格式及...
StarRocks
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在节点编辑页面右侧导航栏的 调度配置>调度参数，为该变量赋值。调度参数支持的格式及...
新建FLINK_SQL任务
离线模式（Bate）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务生产环境和开发环境...
新建FLINK_SQL任务
离线模式（Bate）调度配置（必选）：调度配置用于定义节点在生产环境的周期调度方式。您可以通过调度配置中调度属性，配置任务调度周期与生效日期等。配置说明，请参见 离线模式调度配置。资源配置（必选）：配置任务生产环境和开发环境...
数据开发
调度依赖配置：配置调度依赖的目的是为了保障上游表产出完成才会触发下游读取数据，而当前节点上游的数据是静态的，不需要等待产出，所以本节点的上游依赖可配置为工作空间根节点，即周期依赖的上游节点配置为"使用工作空间根节点"，其他...
离线集成概述
属性配置：配置离线管道任务的属性，包括基本信息、调度配置、调度依赖、运行配置等。更多信息，请参见 离线集成任务属性配置概述。质量监控：通过配置离线集成管道的质量监控，Dataphin会自动为您监控数据表的质量，如果数据表有质量风险...
时间属性配置说明
可根据需要配置日历所应用的工作空间、日历的有效期、指定日期任务的调度方式等规则，详情请参见 配置调度日历。您需根据所选调度日历，结合 调度类型 及 调度周期 等其他调度配置，实现任务在指定时间进行调度。调度周期 调度周期即任务在...
AnalyticDB for MySQL
步骤三：配置任务调度 如您需要周期性执行创建的节点任务，可单击节点编辑页面右侧的 调度配置，根据业务需求配置该节点任务的调度信息。配置详情请参见 任务调度属性配置概述。说明 您需要设置节点的 重跑属性 和 依赖的上游节点，才可以...
Cron
6#3 每月的第三个周五10:15触发 Cron定时调度配置示例 在创建调度任务时可以使用Cron定时调度，创建调度任务的详细操作步骤请参见 创建调度任务。本文仅介绍在创建调度任务时如何配置Cron定时调度。进入 定时配置 页签，详情请参见 创建...
调度周期：月调度
配置示例 配置路径 您需要进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 调度配置>时间属性 区域配置节点的调度周期。场景示例 配置详情 目标任务配置在每月最后一天运行，则每月最后一天生成的实例会正常调度执行，而其它...
GetFile
该参数与 DataWorks控制台 中，数据开发任务的“调度配置>调度依赖”配置为“上一周期”后，依赖项选择”其他节点“时配置的内容对应。ResourceGroupId Long 375827434852437 文件发布成任务后，任务执行时对应的资源组。您可以调用 ...
创建并使用AnalyticDB for PostgreSQL节点
步骤三：配置任务调度 如您需要周期性执行创建的节点任务，可单击节点编辑页面右侧的 调度配置，根据业务需求配置该节点任务的调度信息。配置详情请参见 任务调度属性配置概述。说明 您需要设置节点的 重跑属性 和 依赖的上游节点，才可以...
ClickHouse SQL
步骤三：配置任务调度 如您需要周期性执行创建的节点任务，可单击节点编辑页面右侧的 调度配置，根据业务需求配置该节点任务的调度信息。配置详情请参见 任务调度属性配置概述。说明 您需要设置节点的 重跑属性 和 依赖的上游节点，才可以...
逻辑表查询
此处以简单取模为例，复杂算法配置步骤，请参见 路由算法配置。使用 INSERT 语句插入值。进行快速查询。配置了路由算法后，带路由字段则可以快速查询指定物理表（免去人为计算、切换物理库表的操作）。查询结果会额外提供一个字段表示数据...
采集数据
配置调度时间：配置 调度周期 为 日；定时调度时间 为 00:15。配置重跑属性：配置为 运行成功或失败后皆可重跑。配置调度依赖：配置依赖的上游节点为 使用工作空间根节点。本教程中 WorkShop_Start 作为流程管控节点，无其他强上游依赖，...
创建CDH Hive节点
步骤三：配置任务调度 如果您需要周期性执行创建的节点任务，可以单击节点编辑页面右侧的 调度配置，根据业务需求配置该节点任务的调度信息：配置任务调度的基本信息，详情请参见 配置基础属性。配置时间调度周期、重跑属性和上下游依赖...
采集数据
配置调度时间：配置 调度周期 为 日；定时调度时间 为 00:15。配置重跑属性：配置为 运行成功或失败后皆可重跑。配置调度依赖：配置依赖的上游节点为 使用工作空间根节点。本教程中 WorkShop_Start 作为流程管控节点，无其他强上游依赖，...
创建CDH Presto节点
步骤三：配置任务调度 如果您需要周期性执行创建的节点任务，可以单击节点编辑页面右侧的 调度配置，根据业务需求配置该节点任务的调度信息：配置任务调度的基本信息，详情请参见 配置基础属性。配置时间调度周期、重跑属性和上下游依赖...
配置基础属性
进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 基础属性 区域配置调度节点的基本信息。参数 描述 名称 新建数据开发节点时输入的节点名称，不可以修改。节点ID 数据开发节点提交后会生成唯一的节点ID，不可以修改。节点类型 ...
批量上传质量规则
说明 批量配置调度时，需要确保所选资源表的分区表达式一致，如果配置的分区和表实际分区不一致，可能会报错。批量配置调度时，非分区表不会保存分区表达式，只会保存调度配置。试跑：试跑后，可单击 图标 查看试跑日志。说明 批量运行时，...
批量上传质量规则
说明 批量配置调度时，需要确保所选资源表的分区表达式一致，如果配置的分区和表实际分区不一致，可能会报错。批量配置调度时，非分区表不会保存分区表达式，只会保存调度配置。试跑：试跑后，可单击 图标 查看试跑日志。说明 批量运行时，...
- 产品推荐
- 这些文档可能帮助您