任务组批量升级
配置任务组批量升级 通过企业设置->任务组管理->新建企业任务组，在创建新建任务组时，选择开启"支持批量升级。流水线使用任务组 在配置流水线过程中，选择已经创建的任务组。支持批量升级，流水线在使用任务组时无法任意更改任务组配置。...
报警任务概述
如何配置报警任务 配置伸缩组内报警任务的相关操作如下所示：控制台文档 说明 API文档 配置报警任务 创建报警任务 CreateAlarm 查看报警任务 DescribeAlarms 修改或删除报警任务 ModifyAlarm DeleteAlarm 停用或启用报警任务 DisableAlarm ...
TensorboardSpec
名称 类型 描述 示例值 object 后付费的 Tensorboard 任务相关配置。...ecs.g6.large SecurityGroupId string 后付费 Tensorboard 任务配置的安全组的 ID。sg-xxxxx SwitchId string 后付费 Tensorboard 任务配置的 vSwitch 的 ID。vsw-xxxx
Kafka单表实时入湖OSS（HUDI）
当任务配置错误、模拟运行过程中异常或者产生脏数据时，会实时反馈出异常信息，能够帮助您快速评估任务配置的正确性，以及是否能得到预期结果。单击页面右上角的 模拟运行，在弹出的对话框中设置针对Kafka Topic的采样参数（开始时间 和 ...
Kafka实时ETL同步至Hologres
当任务配置错误、模拟运行过程中异常或者产生脏数据时，会实时反馈出异常信息，能够帮助您快速评估任务配置的正确性，以及是否能得到预期结果。单击页面右上角的 模拟运行，在弹出的对话框中设置针对Kafka Topic的采样参数（开始时间 和 ...
配置资源属性
周期任务的运行依赖于调度资源组，您可以在目标任务调度配置的资源属性区域，选择任务调度运行时需要使用的资源组。配置资源组 进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 资源属性 区域配置节点调度时使用的资源组。在 ...
创建并配置发布环境
开启后，任务发布时，将继续使用原资源组运行任务。配置依赖映射。该区域显示原工作空间下存在的所有跨项目依赖的上游项目名称，您可以为该项目配置与其映射的目标项目。配置后，任务发布时，系统在目标工作空间中会根据该映射关系，将目标...
执行补数据并查看补数据实例（新版）
跟随任务配置：使用周期任务原本配置的资源组执行补数据实例。指定调度资源组：使用指定资源组执行补数据实例，避免补数据实例与周期实例抢占资源。说明 请注意配置资源组网络连通，否则任务可能运行失败。若指定的资源组未绑定相关工作...
MySQL整库实时同步至OSS数据湖
已完成MySQL和OSS数据源配置，以便在同步任务配置时，可通过选择数据源名称来控制同步读取和写入的数据库。配置数据源的操作详情请参见 配置MySQL数据源、配置OSS数据源。重要 配置数据源时，需要同步完成独享数据集成资源组与MySQL数据源...
ClickHouse整库数据离线同步至Hologres
您可以在右上角的 资源组配置 处修改任务运行使用的独享数据集成资源组。完成上述配置后，您可以单击 完成配置，完成同步任务的创建。执行同步任务 进入 数据集成>同步任务 界面，找到已创建的同步方案。单击操作列的 启动/提交执行 按钮，...
配置任务基本信息
您可以在离线任务编辑器属性对话框中查看离线任务的基本详细和进行调度配置，包括任务的名称、ID、类型，并配置对应责任人、描述等基本信息。本文为您介绍离线任务属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口，进入离线任务...
配置任务基本信息
您可以在离线任务编辑器属性对话框中查看离线任务的基本详细和进行调度配置，包括任务的名称、ID、类型，并配置对应责任人、描述等基本信息。本文为您介绍离线任务属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口，进入离线任务...
计算任务运行配置
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
计算任务运行配置
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
离线管道任务运行配置
您可根据业务场景为离线管道任务配置任务级的运行超时时间和任务运行失败时的重跑策略，离线管道任务长时间资源占用造成资源浪费的同时提高离线管道任务运行的可靠性。本文将为您介绍如何配置离线管道任务的运行配置。操作步骤 请参见 离线...
离线管道任务运行配置
您可根据业务场景为离线管道任务配置任务级的运行超时时间和任务运行失败时的重跑策略，离线管道任务长时间资源占用造成资源浪费的同时提高离线管道任务运行的可靠性。本文将为您介绍如何配置离线管道任务的运行配置。操作步骤 请参见 离线...
任务管理
关闭（默认）并发执行组内任务 仅当配置多个数据库时生效，支持的选项：开启：SQL语句会同步执行到所有数据库中。关闭（默认）：SQL语句会执行到第一个数据库中，若成功，则依次执行到其他数据库中。忽略执行错误 根据您的需求选择：开启：...
通用参考：按量付费转包年包月
任务类型 所用资源组 资源组介绍及计费说明 调度任务 公共调度资源组 使用公共资源组 公共调度资源组计费说明：按量付费 数据集成任务 公共数据集成（调试）资源组 使用公共资源组 公共数据集成（调试）资源组：按量计费 调用数据服务API ...
新建STARROCKS_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
查看并管理手动任务
调度资源组：可根据手动任务配置的调度资源组进行筛选。如果您需要重新选择，则单击，可快速清除已选筛选条件。③ 手动任务列表区 手动任务页面以列表形式为您展示已提交到运维中心的手动任务。列表 操作 栏为您展示手动任务支持的运维管理...
实时模式配置概述
对于流批一体任务的实时模式您需定义该任务实时相关的属性，包括任务资源、时间参数、Checkpoint 等。本文为您介绍流批一体任务实时模式配置的相关内容。实时模式配置入口 在Dataphin首页，单击...配置说明，请参见 实时模式依赖关系配置。
新建VIRTUAL任务
背景信息 在开始构建数据模型前，您可以创建基于该数据模型的虚拟节点，以便于该数据模型中其他任务配置调度参数时依赖该节点。操作步骤 请参见 数据开发入口，进入数据 开发 页面。在数据 开发 页面，按照下图操作指引进入新建VIRTUAL任务...
实时模式配置概述
对于实时任务的实时模式您需要定义该任务实时相关的属性，包括 时间参数、Checkpoint 等。本文为您介绍实时任务实时模式配置的相关内容。实时模式配置入口 在Dataphin首页，单击顶部菜单栏的 研发...配置说明，请参见 实时模式依赖关系配置。
新建VIRTUAL任务
背景信息 在开始构建数据模型前，您可以创建基于该数据模型的虚拟节点，以便于该数据模型中其他任务配置调度参数时依赖该节点。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面。在数据 开发 页面，按照下图操作...
设置过滤条件
同步任务：使用修改同步对象功能进入 配置任务对象及高级配置 阶段，在 已选择对象 区域框中展开任务同步或迁移的对象，然后右键单击目标对象，修改 过滤条件 并根据提示完成后续的任务配置。更多信息，请参见 修改同步对象。常见报错 若您...
新建INCEPTOR_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存代码...
新建ARGODB_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
新建HADOOP_MR任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 配置离线任务调度依赖。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，...
新建ADB_PG_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
新建SHELL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
新建SHELL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
使用弹性伸缩为NLB自动添加或移除后端服务器
弹性伸缩产品支持关联网络型负载均衡NLB的服务器组，通过配置触发任务，自动调整服务器组内的ECS实例个数，从而有效增强了NLB的高可用服务能力并降低了资源使用成本。场景示例 某新闻网站播出了一则新闻，访问量突增，服务器无法承载巨大...
使用弹性伸缩为CLB自动添加或移除后端服务器
弹性伸缩产品支持关联传统型负载均衡CLB的服务器组，通过配置触发任务，自动调整服务器组内的ECS实例个数，从而有效增强了CLB的高可用服务能力并降低了资源使用成本。场景示例 某新闻网站播出了一则新闻，访问量突增，服务器无法承载巨大...
使用弹性伸缩为ALB自动添加或移除后端服务器
弹性伸缩产品支持关联应用型负载均衡ALB的服务器组，通过配置触发任务，自动调整服务器组内的ECS实例个数，从而有效增强了ALB的高可用服务能力并降低了资源使用成本。场景示例 某新闻网站播出了一则新闻，访问量突增，服务器无法承载巨大...
新建IMPALA_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
新建SPARK_JAR_ON_HIVE任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
新建HIVE_SQL任务
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明，请参见 计算任务运行配置。在代码编写页面，保存并提交SQL任务。单击页面上的 图标，保存...
创建隐匿信息查询任务
隐私信息检索任务，不告诉数据服务方要查询的对象，获得匹配的查询结果。本文为您介绍如何创建TrustDA/PIR任务。场景描述 A有一张数据表datatrust_a/demo_pir_a_client用于记录要查询人群id，有一张数据表datatrust_a/demo_pir_a_result...
配置离线集成管道基本信息
您可以在离线集成管道编辑器属性对话框中查看离线集成任务的基本详细和进行调度配置，包括集成任务的名称、节点ID、节点类型，并配置对应责任人、描述等基本信息。本文将为您介绍离线集成任务属性的基本信息参数配置。操作步骤 请参见 离线...
AnalyticDB for MySQL 3.0数据源
单表及整库实时同步任务配置指导 操作流程请参见 DataStudio侧实时同步任务配置。整库离线读、单表或整库全增量实时写等整库级别同步配置指导 操作流程请参见 数据集成侧同步任务配置。附录：脚本Demo与参数说明 附录：离线任务脚本配置...
- 产品推荐
- 这些文档可能帮助您