简介
任务组（JobGroup）：顾名思义，任务组是外呼任务的逻辑分组，比如同一天的外呼任务，同一批次的外呼任务，可以定义在同一任务组中。任务（Job）：一个外呼任务对应一个联系人，除了联系人信息外，还包括业务相关的自定义参数。联系人...
导出离线日志（公测中）
管理日志导出任务 任务管理页面展示由任务模板定时或批量生成的所有日志任务，包括任务 ID、任务类型、执行器组、任务模板名称、任务执行时间、执行状态等信息。在 任务管理 页面，从任务列表中选择要查看的任务，单击 查看日志，查看当前...
查看资源组
资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按数据API的定义提供数据服务。系统应用部署成功后会注册或者更新资源组，可查看资源组，还可以为资源组分配工作组。操作步骤 登录企业数据智能...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按数据API的定义提供数据服务。按使用场景，资源组分为两类：系统资源组：由数据资源平台提供，供所有用户使用，对于QPS和并发有限制，...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按数据API的定义提供数据服务。按使用场景，资源组分为两类：系统资源组：由企业数据智能平台提供，供所有用户使用，对于QPS和并发有...
创建SMC迁移任务
名称 含义 说明 是否加入分组调度 是否加入调度组 是：可以将任务加入状态为 开启 的调度组，CMH会按照调度规则自动调度。否：不加入调度组，提交后任务会立刻开始执行。查看迁移任务 迁移任务发起后，您可以点击源端资源ID旁边的箭头，...
DTS任务填写字段说明
本文介绍了创建DTS迁移任务相关字段详解。创建DTS任务填写字段详解 名称 含义 说明 ...是否加入分组调度 是否加入调度组 是：可以将任务加入状态为 开启 的调度组，CMH会按照调度规则自动调度。否：不加入调度组，提交后任务会立刻开始执行。
购买与使用独享数据传输服务资源组
项目级：为整个项目的所有数据传输任务指定使用公共资源组还是独享资源组、指定默认的资源组是哪个资源组。任务级：在数据传输任务代码或者数据集成任务中指定当前任务使用哪个资源组。用户级：当前登录用户只要有独享资源组的使用权限就...
流程配置
任务编排 添加并行任务 在流水线编辑页面，鼠标移动到一个阶段会出现“+并行任务”按钮，点击打开 选择任务组 面板，选择合适的任务组模板，即可完成并行任务的添加。添加串行任务 在流水线编辑页面，鼠标移动到一个任务会出现“+”，可以...
DescribeScheduledTasks-查询定时任务的信息
接口说明 您可以通过定时任务的 ID、定时任务的名称、定时任务执行的伸缩规则等查询定时任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权...
基本概念
节点实例的状态如下：运行中（RUNNING）暂停（SUSPEND）失败（FAIL）成功（SUCCESS）终止中（KILLING）跳过（SKIPPED）取消（CANCELLED）排队中（QUEUED）任务流 任务流是由多个任务节点组合编排出的任务组，任务之间可以有依赖关系，整个...
任务组管理
企业成员在创建流水线的过程中，对流水线任务节点进行编排时，可以选择...管理任务组 可在 企业管理->任务组管理 中管理 Flow 提供的任务组 和 用户创建的企业任务组，任务组可关闭，关闭后企业成员在编排流水线时，将无法继续使用该任务组。
运维中心入门
背景信息 DataWorks运维中心支持对周期任务、手动任务、实时同步任务等多种类型任务进行运维管理，并针对任务本身及任务执行使用的资源等各类对象提供多种监控方式，方便您根据监控报警及时发现并处理异常，保障数据生产的高效与稳定。...
任务组批量升级
配置任务组批量升级 通过企业设置->任务组管理->新建企业任务组，在创建新建任务组时，选择开启"支持批量升级。流水线使用任务组 在配置流水线过程中，选择已经创建的任务组。支持批量升级，流水线在使用任务组时无法任意更改任务组配置。...
CreateAlarm-创建一个报警任务
创建一个报警任务。接口说明 如果您创建自定义监控类型的报警任务（MetricType=custom），您需要先将自定义监控项指标上报到云监控。具体操作，请参见 自定义监控报警任务。创建报警任务时，您需要指定监控项（MetricName），并配合维度...
使用工作空间参数
使用限制 若某任务使用了工作空间参数，且运行该任务的独享调度资源组是在 2024年01月01日 前购买，则请联系技术支持人员升级资源组，否则任务将运行失败。创建工作空间参数 进入工作空间参数创建入口。进入运维中心页面。登录 DataWorks...
离线同步日志分析
当任务长时间处于等待数据集成任务执行资源的状态时，可能是其他任务运行占用该资源组上的资源导致当前任务无资源执行而处于等待状态，您可以通过以下方案解决此类问题：待占用该数据集成资源组的任务（即运行在该资源组上的任务）执行成功...
DescribeDataFlowTasks-查询数据流动任务列表
查询数据流动任务。接口说明 仅 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持查询数据流动任务。您可以在控制台文件系统详情页面查看版本信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功...
快速开始
添加任务 点击阶段任务列表的新建任务按钮，如下所示：如上图所示，对于使用了release文件定义源码构建的用户可以添加“应用构建”，对于未使用release文件的用户可以添加“构建”任务来自定义构建过程，“构建任务”是一个工作区相关任务...
实时同步任务延迟解决方案
确认造成延迟问题在同步任务的读端还是写端 如果是在DataStudio创建的实时同步任务，您需要在 运维中心>实时任务运维>实时同步任务 界面单击运行中的任务名称，弹出任务运行详情对话框。详情请参见 实时同步任务运行与管理。在任务运行详情...
管理模板
阿里云E-MapReduce(简称EMR)Serverless Spark提供了任务模板和SQL Compute模板两种模板，以支持不同的任务执行和管理需求。任务模板适用于有固定执行参数和资源需求的批处理任务，而SQL Compute模板适合SQL任务的开发和快速迭代。本文档将...
DescribeScheduledTasks
接口说明 您可以通过定时任务的ID、定时任务的名称、定时任务执行的伸缩规则等查询定时任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称...
使用公共资源组
公共资源组是一个公共资源池，不保证任务可以及时得到资源并被调度执行。如果您需要任务得到高保证的运行，请使用独享资源组，详情请参见 新增和使用独享数据集成资源组、新增和使用独享调度资源组。打通网络时，如果您需要公共资源组机器...
独享资源组
独享资源组使用场景 独享调度资源组使用场景 独享数据集成资源组使用场景 独享资源组网络配置 独享资源组访问VPC环境下数据的前提条件是什么？如何查看数据源的网络环境？添加独享资源组白名单 独享资源组商业化行为 如何对资源组进行续费...
CreateJob-创建任务
创建一个任务到集群中运行。您可以指定数据源配置、代码源配置、启动命令以及任务运行的每个节点的计算资源配置等信息。接口说明 请确保在使用该接口前，已充分了解 PAI-DLC 产品的收费方式和 价格。调试 您可以在OpenAPI Explorer中直接...
任务中心
任务中心主要是对离线、在线模型自动化调度运行进行任务式管理，每次任务调度时，都将按照模型设置好的参数和数据自动进行运行，通过任务状态监控单次任务的健康情况。在线服务 在线服务模块展示并管理用户添加的服务，已创建的服务支持...
资源组操作及网络连通
如何切换任务在调度系统中执行所用的资源组 在生产运维中心切换任务执行使用的调度资源组和数据集成任务执行资源组：在数据开发界面走发布流程修改生产环境任务执行使用的资源组。说明 以下方式修改资源组请记得发布，标准模式下提交操作...
ALIYUN:ESS:ScheduledTask
ALIYUN:ESS:ScheduledTask类型用于根据指定参数创建定时任务。语法 {"Type":"ALIYUN:ESS:ScheduledTask","Properties":{"TaskEnabled":Boolean,"Description":String,"ScheduledTaskName":String,"LaunchExpirationTime":Integer,...
等待资源
说明 如果资源使用率高但实际无任务执行或资源组上可执行任务数未达资源组上限但仍无法执行任务，您可以单击 申请链接 或扫描下方二维码加入DataWorks钉钉交流群进行售前售后咨询，咨询可直接@智能机器人，值班时间段内也可直接联系值班...
创建同步任务
离线同步任务将通过调度资源组下发至数据集成任务执行资源组上执行，任务调度收费与离线同步任务个数有关，和任务配置的并发无关。关于离线同步任务下发机制，详情请参见：任务下发机制。同步速率 用于控制同步速率。限流：您可以通过限流...
自定义资源组
本文为您介绍自定义资源组有哪些应用场景、自定义资源组有哪些使用限制、如何使用自定义资源组等常见问题。为什么找不到自定义资源组使用入口？自定义资源组已经不再支持，请使用独享资源组。目录 如何安装监控？如何处理添加自定义调度...
CreateAsyncTask-创建异步导出任务
创建异步导出任务，例如导出网站业务转发规则、端口转发规则、会话保持和健康检查配置、DDoS防护策略、IP黑白名单。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK...
视频点播VOD的审计事件
AddEditingProject 创建云剪辑工程（视频编辑任务）。AddEditingProjectMaterials 添加云剪辑工程素材。AddLiveStreamVideo 添加直播视频。AddStorage 添加存储地址。AddTranscodeTemplateGroup 添加转码配置信息。AddVodDomain 添加点播...
通过IntelliJ IDEA插件部署应用
如果您需要部署多模块Maven工程的子模块，您需要在 Deploy to SAE 页面的 Before launch 区域，将待部署的子模块任务设置为最后执行。具体操作，请参见 使用IntelliJ IDEA部署多模块工程中的子模块。多模块工程是常见的项目组织形式，...
提交命令
您可以通过客户端工具提交多种类型的训练任务。本文介绍提交任务相关的命令详情，包括调用格式、参数解释和使用示例。提交任务的通用参数 使用DLC命令行提交TensorFlow（tfjob），PyTorch（pytorchjob），XGBoost（xgboostjob）任务时，...
基本概念
调度资源组 调度资源组用于任务的调度运行。首次开通EMR Workflow服务时，将免费为您提供一个默认调度资源组。工作流定义 工作流定义是对一系列按照特定逻辑进行编排的任务及其执行顺序的描述。它包括分配给各个任务的调度节点和制定的调度...
WAL日志并行回放
Removed：当Dispatcher进程发现一个任务的状态已经为Finished，那么该任务所有的前置依赖任务也都应该为Finished状态，Removed状态表示Dispatcher进程已经将该任务以及该任务所有前置任务都从管理结构体中删除；可以通过该机制保证...
WAL日志并行回放
Removed：当Dispatcher进程发现一个任务的状态已经为Finished，那么该任务所有的前置依赖任务也都应该为Finished状态，Removed状态表示Dispatcher进程已经将该任务以及该任务所有前置任务都从管理结构体中删除；可以通过该机制保证...
调度中心
本文介绍调度中心功能的具体使用流程，帮助您快速掌握创建、查看及使用调度组。...将您的迁移任务加入调度组后，您可以通过调度组列表的 任务详情 观察组内任务的执行情况，也可以 点击调度组名称，查看组内任务的任务概览。
智能诊断
全链路诊断 DataWorks根据任务运行的必要条件，将依次检查上游任务的运行状态、当前任务设置的定时时间、调度资源的使用情况、当前任务的执行情况：上游依赖 智能诊断的 上游依赖 页面，为您展示当前任务的上游任务运行情况，如果上游任务...
- 产品推荐
- 这些文档可能帮助您