任务组管理

企业成员在创建流水线的过程中,对流水线任务节点进行编排时,可以选择...管理任务组 可在 企业管理->任务组管理 中管理 Flow 提供的任务组 和 用户创建的企业任务组任务组可关闭,关闭后企业成员在编排流水线时,将无法继续使用该任务组

任务组批量升级

配置任务组批量升级 通过企业设置->任务组管理->新建企业任务组,在创建新建任务组时,选择开启"支持批量升级。流水线使用任务组 在配置流水线过程中,选择已经创建的任务组。支持批量升级,流水线在使用任务组时无法任意更改任务组配置。...

商米:DevOps转型实现精益开发与自动化运维

工程能力建设作用于协作方式的转变 由于开发和运维在工作流程上割裂的原因,在团队协作看板上,也是割裂的,彼此完全基于不同的单元在组织工作。两周的迭代,第一周,需要主要集中在团队开发看板上,第二周,发布请求主要集中在运维发布...

流程配置

任务编排 添加并行任务 在流水线编辑页面,鼠标移动到一个阶段会出现“+并行任务”按钮,点击打开 选择任务组 面板,选择合适的任务组模板,即可完成并行任务的添加。添加串行任务 在流水线编辑页面,鼠标移动到一个任务会出现“+”,可以...

常见报错

本文介绍配置任务任务运行时系统返回的报错信息(如重试信息或错误码)以及解决方法。说明 本文以正则表达式((.*)?的形式表示报错信息中的变量。若报错无法解决,您可以 通过钉钉(钉钉通讯客户端下载地址)进入到DTS客户交流钉钉群...

基本概念

节点实例的状态如下:运行中(RUNNING)暂停(SUSPEND)失败(FAIL)成功(SUCCESS)终止中(KILLING)跳过(SKIPPED)取消(CANCELLED)排队中(QUEUED)任务流 任务流是由多个任务节点组合编排出的任务组,任务之间可以有依赖关系,整个...

数据传输作业:数据集成

在配置同步任务前,您需要确保数据集成资源与您将同步的数据源网络环境已经连通,详情请参见 配置资源与网络连通。实时同步 DataWorks提供的实时数据同步功能,使用单表或整库同步方式,将源端数据库中部分或全部表的数据变化实时同步...

通用参考:切换资源

资源在购买、新增配置完成后即可被所属工作空间内的任务使用。您可根据实际场景,参考本文切换任务使用的资源,并修改资源归属的工作空间。背景信息 若资源已绑定工作空间,修改其所归属的工作空间时,需先解绑该工作空间,再重新...

离线同步任务运维

为确保任务运行无误,当您在DataStudio中完成任务开发,并发布至生产环境后,您可以进入运维中心管理离线同步任务、监控任务运行状态、修改同步资源和查看任务运行日志等。本文列举离线同步任务的常见运维操作。前提条件 已完成离线同步...

离线同步日志分析

任务长时间处于等待数据集成任务执行资源的状态时,可能是其他任务运行占用该资源上的资源导致当前任务无资源执行而处于等待状态,您可以通过以下方案解决此类问题:待占用该数据集成资源任务(即运行在该资源上的任务)执行成功...

数据集成侧同步任务配置

说明 DataWorks的离线同步任务通过调度资源将其下发到数据集成任务执行资源上执行,所以离线同步任务除了涉及数据集成任务执行资源外,还会占用调度资源资源。如果使用了独享调度资源,将会产生调度实例费用。您可通过 任务下发...

新增和使用独享调度资源

您可根据业务场景需求选择购买合适规格的独享调度资源,用于任务的调度运行。购买独享资源后,在实际使用前您还需进行网络绑定、白名单等配置操作。本文为您介绍从购买至使用独享调度资源的全流程与步骤详情。前提条件 购买和使用独...

快速开始

添加任务 点击阶段任务列表的新建任务按钮,如下所示:如上图所示,对于使用了release文件定义源码构建的用户可以添加“应用构建”,对于未使用release文件的用户可以添加“构建”任务来自定义构建过程,“构建任务”是一个工作区相关任务...

DataWorks公共数据集成(调试)资源下线公告

已经配置了DataWorks公共数据集成资源任务可继续正常运行,但不能对这些任务进行修改,若您需修改这些任务,请于 2024年4月1日 前切换为 DataWorks独享数据集成资源。2024年9月1日 起,DataWorks公共数据集成资源不再提供服务,...

PAI产品购买指引

【预付费】前往 AI计算资源(预付费)页面,提前购买通用训练资源或灵骏智算资源专有资源,部署在专有资源上的分布式训练任务,按照专有资源购买时长收费,如何使用专有资源提交训练任务,请参见 分布式训练(DLC)。说明 灵骏智...

常见问题

如果在DTS进行增量同步过程中删除了目标库中的某一个库或表,导致任务异常,您可以采取如下两种方案恢复任务:方法一:重新配置任务,待同步对象不选择导致任务失败的库或表。方法二:修改同步对象,移除导致任务失败的库或表。具体操作,...

运行失败

因读表失败导致的 java.lang.ArrayIndexOutOfBoundException 报错信息 解决方法 这种情况的原因通常是内部Mapper任务 GeneratePkMapper 依赖读取的一个数长度未获取到正确数据,通常情况该数长度是前序的SQL任务通过读表获取的,一般是...

任务运行诊断

上游任务对当前任务执行的影响如下:上游任务是否为成功状态,决定当前任务是否执行 节点依赖关系设置后,默认当前任务与当前任务依赖的上游存在数据依赖(即上游任务未执行,将导致当前节点依赖的上游数据未产出,当前节点执行会产生数据...

执行测试并查看测试实例

测试实例是对周期任务进行测试时产生的实例,您可以在测试实例界面,通过列表及DAG图的方式快速查看实例的详细信息。...任务运行问题定位 如果任务运行不符合预期,您可以通过 运行诊断 功能,诊断任务未运行的原因或存在的问题。

任务管理

task_suspend()后所处的挂起状态 SLP 任务处于休眠状态 PEND_SUS 任务在阻塞状态下,被其他任务挂起,处于阻塞挂起状态 SLP_SUS 任务在休眠状态下,被其他任务挂起,处于休眠挂起状态 DELETED 任务处于删除状态 任务调度 任务调度是为多...

配置任务常见错误码及排查方法

本文介绍了用户在使用控制台或OpenAPI配置任务时系统返回的错误码、出现报错的场景及解决方法。用户配置使用类错误码 错误码 报错场景 原因及解决方法 DTS.Msg.LXCreateOrderError 购买DTS实例时创建订单不成功。原因:未将UID添加至白名单...

群组任务

任务:群组任务包含了群中所有成员创建的任务。在群中可以查看所有任务和完成情况,便于对群中的各项事务进行全面的了解和梳理。个人任务:个人任务包含了“我”创建的和指派给“我”的任务。如某条任务中与“我”无关则在个人任务...

调度中心

本文介绍调度中心功能的具体使用流程,帮助您快速掌握创建、查看及使用调度。...将您的迁移任务加入调度后,您可以通过调度列表的 任务详情 观察任务的执行情况,也可以 点击调度名称,查看任务任务概览。

常见问题

任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因任务运行中卡住怎么办?如何排查任务运行慢的原因任务运行实例达到上限怎么办?任务上一次没...

创建StarRocks计算源

Dataphin支持使用StarRocks作为Dataphin的离线计算引擎,为Dataphin项目提供处理离线计算任务的能力。本文为您介绍如何创建StarRocks计算源。背景信息 StarRocks是一款高性能分析数据库,支持实时、多维和高度并发的数据分析。StarRocks...

调度中心字段说明

调度ID 标识该调度的唯一ID 当前任务数 当前调度内全部任务的数量 当前任务数=成功任务数+失败任务数+其它状态任务数。任务详情 当前调度任务执行情况统计 成功任务:当前调度内执行成功的任务数量。失败任务:当前调度内...

索引

任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因任务运行中卡住怎么办?如何排查任务运行慢的原因任务运行实例达到上限怎么办?任务上一次没...

常见问题

任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因任务运行中卡住怎么办?如何排查任务运行慢的原因任务运行实例达到上限怎么办?任务上一次没...

常见问题

任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因任务运行中卡住怎么办?如何排查任务运行慢的原因任务运行实例达到上限怎么办?任务上一次没...

专业版公测(2022年01月26日)

阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测,本次公测带来了全新的可视化功能,兼容开源XXL-JOB任务,支持一次性任务,融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下,...

索引

任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因任务运行中卡住怎么办?如何排查任务运行慢的原因任务运行实例达到上限怎么办?任务上一次没...

索引

任务失败,报错“ClassNotFoundException”任务失败,报错“jobInstance=xxx don't update progress more than 60s”如何排查任务失败的原因任务运行中卡住怎么办?如何排查任务运行慢的原因任务运行实例达到上限怎么办?任务上一次没...

API接口常见问题

需要每次创建JobGroup,任务组是外呼任务的逻辑分组,比如同一天的外呼任务,同一批次的外呼任务,可以定义在同一任务组中。针对同一个JobGroup,可以,循环多次调用AssignJobs接口下发任务。为保证AssignJobs的性能,建议每次调用任务数...

DescribeScheduledTasks-查询定时任务的信息

接口说明 您可以通过定时任务的 ID、定时任务的名称、定时任务执行的伸缩规则等查询定时任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权...

创建发布任务

设置排除名单 本次发布任务排除掉的人员名单,在该名单中的人员的设备不会进行版本升级。并发设备数 同时进行升级操作的设备数量。管理员可根据公司自身网络可承载的峰值流量计算可同时升级的设备数量。避免多台设备同时下载升级安装包时,...

查看并管理脚本任务

脚本任务页面包含计算任务、同步任务和集成任务,每个任务对应一个调度节点,本文以节点视角为您介绍如何查看并管理脚本任务。脚本任务页面入口 在Dataphin首页,单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引,进入 ...

DescribeScheduledTasks

接口说明 您可以通过定时任务的ID、定时任务的名称、定时任务执行的伸缩规则等查询定时任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称...

专业版公测(2022年01月26日)

阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测,本次公测带来了全新的可视化功能,兼容开源XXL-JOB任务,支持一次性任务,融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下,...

API概览

订阅任务的消费管理:CreateConsumerChannel DescribeConsumerChannel ModifyConsumerChannel DeleteConsumerChannel 管理订阅任务的消费,如新增、查询、修改或删除消费。SkipPreCheck 屏蔽或取消屏蔽预检查告警项目。查询DTS同步、...

查看弹性供应

本文介绍如何查看您的弹性供应设置信息、弹性供应中已创建的ECS实例信息和调度任务的执行情况。操作步骤 登录 ECS管理控制台。在左侧导航栏,选择 部署与弹性>>弹性供应。在页面左侧顶部,选择目标资源所在的资源和地域。在 弹性供应...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云消息队列 Kafka 版 云消息队列 RocketMQ 版 对象存储 性能测试 云数据库 MongoDB 版 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用