企业成员在创建流水线的过程中,对流水线任务节点进行编排时,可以选择...管理任务组 可在 企业管理->任务组管理 中管理 Flow 提供的任务组 和 用户创建的企业任务组,任务组可关闭,关闭后企业成员在编排流水线时,将无法继续使用该任务组。
配置任务组批量升级 通过企业设置->任务组管理->新建企业任务组,在创建新建任务组时,选择开启"支持批量升级。流水线使用任务组 在配置流水线过程中,选择已经创建的任务组。支持批量升级,流水线在使用任务组时无法任意更改任务组配置。...
工程能力建设作用于协作方式的转变 由于开发和运维在工作流程上割裂的原因,在团队协作看板上,也是割裂的,彼此完全基于不同的单元在组织工作。两周的迭代,第一周,需要主要集中在团队开发看板上,第二周,发布请求主要集中在运维发布...
任务编排 添加并行任务 在流水线编辑页面,鼠标移动到一个阶段会出现“+并行任务”按钮,点击打开 选择任务组 面板,选择合适的任务组模板,即可完成并行任务的添加。添加串行任务 在流水线编辑页面,鼠标移动到一个任务会出现“+”,可以...
本文介绍配置任务和任务运行时系统返回的报错信息(如重试信息或错误码)以及解决方法。说明 本文以正则表达式((.*)?的形式表示报错信息中的变量。若报错无法解决,您可以 通过钉钉(钉钉通讯客户端下载地址)进入到DTS客户交流钉钉群...
节点实例的状态如下:运行中(RUNNING)暂停(SUSPEND)失败(FAIL)成功(SUCCESS)终止中(KILLING)跳过(SKIPPED)取消(CANCELLED)排队中(QUEUED)任务流 任务流是由多个任务节点组合编排出的任务组,任务之间可以有依赖关系,整个...
在配置同步任务前,您需要确保数据集成资源组与您将同步的数据源网络环境已经连通,详情请参见 配置资源组与网络连通。实时同步 DataWorks提供的实时数据同步功能,使用单表或整库同步方式,将源端数据库中部分或全部表的数据变化实时同步...
资源组在购买、新增配置完成后即可被所属工作空间内的任务使用。您可根据实际场景,参考本文切换任务使用的资源组,并修改资源组归属的工作空间。背景信息 若资源组已绑定工作空间,修改其所归属的工作空间时,需先解绑该工作空间,再重新...
为确保任务运行无误,当您在DataStudio中完成任务开发,并发布至生产环境后,您可以进入运维中心管理离线同步任务、监控任务运行状态、修改同步资源组和查看任务运行日志等。本文列举离线同步任务的常见运维操作。前提条件 已完成离线同步...
当任务长时间处于等待数据集成任务执行资源的状态时,可能是其他任务运行占用该资源组上的资源导致当前任务无资源执行而处于等待状态,您可以通过以下方案解决此类问题:待占用该数据集成资源组的任务(即运行在该资源组上的任务)执行成功...
说明 DataWorks的离线同步任务通过调度资源组将其下发到数据集成任务执行资源组上执行,所以离线同步任务除了涉及数据集成任务执行资源组外,还会占用调度资源组资源。如果使用了独享调度资源组,将会产生调度实例费用。您可通过 任务下发...
您可根据业务场景需求选择购买合适规格的独享调度资源组,用于任务的调度运行。购买独享资源组后,在实际使用前您还需进行网络绑定、白名单等配置操作。本文为您介绍从购买至使用独享调度资源组的全流程与步骤详情。前提条件 购买和使用独...
添加任务 点击阶段任务列表的新建任务按钮,如下所示:如上图所示,对于使用了release文件定义源码构建的用户可以添加“应用构建”,对于未使用release文件的用户可以添加“构建”任务来自定义构建过程,“构建任务”是一个工作区相关任务...
已经配置了DataWorks公共数据集成资源组的任务可继续正常运行,但不能对这些任务进行修改,若您需修改这些任务,请于 2024年4月1日 前切换为 DataWorks独享数据集成资源组。2024年9月1日 起,DataWorks公共数据集成资源组不再提供服务,...
【预付费】前往 AI计算资源组(预付费)页面,提前购买通用训练资源或灵骏智算资源专有资源组,部署在专有资源组上的分布式训练任务,按照专有资源组购买时长收费,如何使用专有资源组提交训练任务,请参见 分布式训练(DLC)。说明 灵骏智...
如果在DTS进行增量同步过程中删除了目标库中的某一个库或表,导致任务异常,您可以采取如下两种方案恢复任务:方法一:重新配置任务,待同步对象不选择导致任务失败的库或表。方法二:修改同步对象,移除导致任务失败的库或表。具体操作,...
因读表失败导致的 java.lang.ArrayIndexOutOfBoundException 报错信息 解决方法 这种情况的原因通常是内部Mapper任务 GeneratePkMapper 依赖读取的一个数组长度未获取到正确数据,通常情况该数组长度是前序的SQL任务通过读表获取的,一般是...
上游任务对当前任务执行的影响如下:上游任务是否为成功状态,决定当前任务是否执行 节点依赖关系设置后,默认当前任务与当前任务依赖的上游存在数据依赖(即上游任务未执行,将导致当前节点依赖的上游数据未产出,当前节点执行会产生数据...
测试实例是对周期任务进行测试时产生的实例,您可以在测试实例界面,通过列表及DAG图的方式快速查看实例的详细信息。...任务运行问题定位 如果任务运行不符合预期,您可以通过 运行诊断 功能,诊断任务未运行的原因或存在的问题。
task_suspend()后所处的挂起状态 SLP 任务处于休眠状态 PEND_SUS 任务在阻塞状态下,被其他任务挂起,处于阻塞挂起状态 SLP_SUS 任务在休眠状态下,被其他任务挂起,处于休眠挂起状态 DELETED 任务处于删除状态 任务调度 任务调度是为多...
本文介绍了用户在使用控制台或OpenAPI配置任务时系统返回的错误码、出现报错的场景及解决方法。用户配置使用类错误码 错误码 报错场景 原因及解决方法 DTS.Msg.LXCreateOrderError 购买DTS实例时创建订单不成功。原因:未将UID添加至白名单...
群任务:群组任务包含了群组中所有成员创建的任务。在群组中可以查看所有任务和完成情况,便于对群组中的各项事务进行全面的了解和梳理。个人任务:个人任务包含了“我”创建的和指派给“我”的任务。如某条任务中与“我”无关则在个人任务...
本文介绍调度中心功能的具体使用流程,帮助您快速掌握创建、查看及使用调度组。...将您的迁移任务加入调度组后,您可以通过调度组列表的 任务详情 观察组内任务的执行情况,也可以 点击调度组名称,查看组内任务的任务概览。
任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因?任务运行中卡住怎么办?如何排查任务运行慢的原因?任务运行实例达到上限怎么办?任务上一次没...
Dataphin支持使用StarRocks作为Dataphin的离线计算引擎,为Dataphin项目提供处理离线计算任务的能力。本文为您介绍如何创建StarRocks计算源。背景信息 StarRocks是一款高性能分析数据库,支持实时、多维和高度并发的数据分析。StarRocks...
调度组ID 标识该调度组的唯一ID 当前任务数 当前调度组内全部任务的数量 当前任务数=成功任务数+失败任务数+其它状态任务数。任务详情 当前调度组内任务执行情况统计 成功任务:当前调度组内执行成功的任务数量。失败任务:当前调度组内...
任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因?任务运行中卡住怎么办?如何排查任务运行慢的原因?任务运行实例达到上限怎么办?任务上一次没...
任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因?任务运行中卡住怎么办?如何排查任务运行慢的原因?任务运行实例达到上限怎么办?任务上一次没...
任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因?任务运行中卡住怎么办?如何排查任务运行慢的原因?任务运行实例达到上限怎么办?任务上一次没...
阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测,本次公测带来了全新的可视化功能,兼容开源XXL-JOB任务,支持一次性任务,融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下,...
任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因?任务运行中卡住怎么办?如何排查任务运行慢的原因?任务运行实例达到上限怎么办?任务上一次没...
任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因?任务运行中卡住怎么办?如何排查任务运行慢的原因?任务运行实例达到上限怎么办?任务上一次没...
需要每次创建JobGroup,任务组是外呼任务的逻辑分组,比如同一天的外呼任务,同一批次的外呼任务,可以定义在同一任务组中。针对同一个JobGroup,可以,循环多次调用AssignJobs接口下发任务。为保证AssignJobs的性能,建议每次调用任务数...
接口说明 您可以通过定时任务的 ID、定时任务的名称、定时任务执行的伸缩规则等查询定时任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权...
设置排除名单 本次发布任务排除掉的人员名单,在该名单中的人员的设备不会进行版本升级。并发设备数 同时进行升级操作的设备数量。管理员可根据公司自身网络可承载的峰值流量计算可同时升级的设备数量。避免多台设备同时下载升级安装包时,...
脚本任务页面包含计算任务、同步任务和集成任务,每个任务对应一个调度节点,本文以节点视角为您介绍如何查看并管理脚本任务。脚本任务页面入口 在Dataphin首页,单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引,进入 ...
接口说明 您可以通过定时任务的ID、定时任务的名称、定时任务执行的伸缩规则等查询定时任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称...
阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测,本次公测带来了全新的可视化功能,兼容开源XXL-JOB任务,支持一次性任务,融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下,...
订阅任务的消费组管理:CreateConsumerChannel DescribeConsumerChannel ModifyConsumerChannel DeleteConsumerChannel 管理订阅任务的消费组,如新增、查询、修改或删除消费组。SkipPreCheck 屏蔽或取消屏蔽预检查告警项目。查询DTS同步、...
本文介绍如何查看您的弹性供应组设置信息、弹性供应组中已创建的ECS实例信息和调度任务的执行情况。操作步骤 登录 ECS管理控制台。在左侧导航栏,选择 部署与弹性>>弹性供应。在页面左侧顶部,选择目标资源所在的资源组和地域。在 弹性供应...