配置任务组批量升级 通过企业设置->任务组管理->新建企业任务组,在创建新建任务组时,选择开启"支持批量升级。流水线使用任务组 在配置流水线过程中,选择已经创建的任务组。支持批量升级,流水线在使用任务组时无法任意更改任务组配置。...
企业成员在创建流水线的过程中,对流水线任务节点进行编排时,可以选择...管理任务组 可在 企业管理->任务组管理 中管理 Flow 提供的任务组 和 用户创建的企业任务组,任务组可关闭,关闭后企业成员在编排流水线时,将无法继续使用该任务组。
本文介绍调度中心功能的具体使用流程,帮助您快速掌握创建、查看及使用调度组。...将您的迁移任务加入调度组后,您可以通过调度组列表的 任务详情 观察组内任务的执行情况,也可以 点击调度组名称,查看组内任务的任务概览。
常见的同步任务执行问题如下:数据同步日志长时间打印WAIT 若数据同步日志长时间打印WAIT,表示DataWorks的调度系统已将同步任务下发,由于当前任务所使用的同步资源组剩余资源无法支持当前任务执行,正在等待其他任务执行完成释放资源。...
任务组(JobGroup):顾名思义,任务组是外呼任务的逻辑分组,比如同一天的外呼任务,同一批次的外呼任务,可以定义在同一任务组中。任务(Job):一个外呼任务对应一个联系人,除了联系人信息外,还包括业务相关的自定义参数。联系人...
任务编排 添加并行任务 在流水线编辑页面,鼠标移动到一个阶段会出现“+并行任务”按钮,点击打开 选择任务组 面板,选择合适的任务组模板,即可完成并行任务的添加。添加串行任务 在流水线编辑页面,鼠标移动到一个任务会出现“+”,可以...
需要每次创建JobGroup,任务组是外呼任务的逻辑分组,比如同一天的外呼任务,同一批次的外呼任务,可以定义在同一任务组中。针对同一个JobGroup,可以,循环多次调用AssignJobs接口下发任务。为保证AssignJobs的性能,建议每次调用任务数...
群任务:群组任务包含了群组中所有成员创建的任务。在群组中可以查看所有任务和完成情况,便于对群组中的各项事务进行全面的了解和梳理。个人任务:个人任务包含了“我”创建的和指派给“我”的任务。如某条任务中与“我”无关则在个人任务...
本产品中所有开放的API,按照功能目录分类,将API链接...通话录音 API 描述 DownloadRecording 调用DownloadRecording下载通话录音 其他 API 描述 创建外呼任务导出接口 创建外呼任务导出接口 获取任务组导出任务进度 获取任务组导出任务进度
使用限制 当前只有Java任务支持数据传输,分布式Java任务请使用MapReduce模型进行数据传输。使用 指南 具体操作,请参见 流程管理。工作流上下游数据传递 SchedulerX提供工作流任务编排,同时支持任务上下游的数据传递。返回执行结果/*@...
本文为您介绍如何在系统管理中配置SQL查询、数据上传任务所使用的资源组。使用限制 仅支持阿里云主账号访问系统管理页面。系统管理中的配置仅在本租户的当前地域生效,并且您需确保SQL查询、数据上传任务使用的数据源和资源组网络连通。...
任务类型 所用资源组 资源组介绍及计费说明 调度任务 公共调度资源组 使用公共资源组 公共调度资源组计费说明:按量付费 数据集成任务 公共数据集成(调试)资源组 使用公共资源组 公共数据集成(调试)资源组:按量计费 调用数据服务API ...
在配置同步任务前,您需要确保数据集成资源组与您将同步的数据源网络环境已经连通,详情请参见 配置资源组与网络连通。实时同步 DataWorks提供的实时数据同步功能,使用单表或整库同步方式,将源端数据库中部分或全部表的数据变化实时同步...
独享调度资源组使用场景 如果非数据集成任务需要访问VPC环境下的数据库、有白名单访问控制的数据库时,需要使用独享调度资源组,独享调度资源组的使用详情请参见 新增和使用独享调度资源组。独享数据集成资源组使用场景 如果您需要同步VPC...
节点实例的状态如下:运行中(RUNNING)暂停(SUSPEND)失败(FAIL)成功(SUCCESS)终止中(KILLING)跳过(SKIPPED)取消(CANCELLED)排队中(QUEUED)任务流 任务流是由多个任务节点组合编排出的任务组,任务之间可以有依赖关系,整个...
资源组介绍 DataWorks包括独享资源组、公共资源组,各资源组根据任务调度、数据集成、数据服务等不同的使用场景,细分为不同类型的资源组,包括:独享调度资源组、独享数据集成资源组、独享数据服务资源组、公共调度资源组、公共数据服务...
租户默认资源组:不归属任何项目,一个租户只有一个默认资源组,任务没有指定单独的自定义资源组或者项目没有指定项目默认资源组时,会使用租户默认资源组来调度,仅针对独享资源任务(除SQL任务、Virtual任务等)。共享调度资源池:SQL...
步骤八:资源组配置 运行当前同步解决方案将产生多个离线同步子任务和一个实时同步子任务,您可以单击界面右上方的 资源组配置,查看并切换当前的任务所使用的离线同步资源组和实时同步资源组。说明 离线和实时同步任务推荐使用不同的资源...
脚本任务页面包含计算任务、同步任务和集成任务,每个任务对应一个调度节点,本文以节点视角为您介绍如何查看并管理脚本任务。脚本任务页面入口 在Dataphin首页,单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引,进入 ...
说明 DataWorks的离线同步任务通过调度资源组将其下发到数据集成任务执行资源组上执行,所以离线同步任务除了涉及数据集成任务执行资源组外,还会占用调度资源组资源。如果使用了独享调度资源组,将会产生调度实例费用。您可通过 任务下发...
说明 DataWorks的离线同步任务通过调度资源组将其下发到数据集成任务执行资源组上执行,所以离线同步任务除了涉及数据集成任务执行资源组外,还会占用调度资源组资源。如果使用了独享调度资源组,将会产生调度实例费用。您可通过 任务下发...
说明 DataWorks的离线同步任务通过调度资源组将其下发到数据集成任务执行资源组上执行,所以离线同步任务除了涉及数据集成任务执行资源组外,还会占用调度资源组资源。如果使用了独享调度资源组,将会产生调度实例费用。您可通过 任务下发...
资源组在购买、新增配置完成后即可被所属工作空间内的任务使用。您可根据实际场景,参考本文切换任务使用的资源组,并修改资源组归属的工作空间。背景信息 若资源组已绑定工作空间,修改其所归属的工作空间时,需先解绑该工作空间,再重新...
如果同步任务中同步的数据源与使用的DataWorks资源组不在同一个时区,则会导致同步的数据有误。数据集成主要用于离线(批量)数据同步。离线(批量)的数据通道通过定义数据来源和去向的数据源和数据集,提供一套抽象化的数据抽取插件...
若指定的资源组未绑定相关工作空间,则仍将使用原有周期任务的资源组。运行时间段 指定本次生成的补数据任务在什么时间执行。是:可指定开始执行补数据实例的时间。否:正常为立即运行,若运行业务日期为今天或未来时间,且未勾选立即运行...
搜索任务 通过名称或ID搜索,添加一个起始任务,以及一个或多个结束任务,平台将根据起始及结束任务分析中间任务(即中间任务为起始任务的直接或间接下游任务,为结束任务的直接或间接上游任务)。中间任务列表 平台根据起始任务及结束任务...
DataWorks为您提供多种数据源之间进行不同数据同步场景的全增量同步任务,包括实时数据同步、离线全量同步、离线增量同步等同步场景,助力企业数据更高效、更便捷的一键上云。背景信息 实际业务场景下,数据同步通常不能通过一个或多个简单...
若与已创建的任务使用相同的部署包,可在选择部署包时选择引用部署包,这样新的任务模板将与被引用任务共用同一部署包,做到只需一次部署即可同步更新。在 任务模板列表 页面,单击目标任务模板 操作 列的 复制。在 任务基本信息 配置向导...
成功提交训练任务后,您可以通过查看任务基本信息与配置、任务事件、资源视图以及任务日志等内容来全面了解任务的运行情况。查看任务基本信息及配置 进入 分布式训练任务 页面。登录 PAI控制台。在左侧导航栏单击 工作空间列表,在工作空间...
租户默认资源组:不归属任何项目,一个租户只有一个默认资源组,任务没有指定单独的自定义资源组或者项目没有指定项目默认资源组时,会使用租户默认资源组来调度,仅针对独享资源任务(除SQL任务、Virtual任务等)。共享调度资源池:SQL...
包括DataWorks调度任务等待耗时与运行耗时7天均值、等待耗时与运行耗时波动率、节点负责人、任务运行耗时、等待资源耗时、调度使用资源组、任务执行环境(开发、生产)、任务类型(周期实例、补数据实例等)等多维度信息。
为确保周期调度的离线同步任务运行无误,请在任务发布完成后,前往 生产运维中心>周期任务 界面查看生产环境任务配置(任务代码,任务使用的调度资源组及数据集成任务执行资源组)是否符合预期。DataWorks的离线同步任务通过调度资源组将其...
脚本任务页面包含计算任务、同步任务和集成任务,每个任务对应一个调度节点,本文以节点视角为您介绍如何查看并管理脚本任务。脚本任务页面入口 在Dataphin首页,单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引,进入 ...
租户默认资源组:不归属任何项目,一个租户只有一个默认资源组,针对独享资源任务(除SQL任务、Virtual任务等),会使用租户默认资源组来调度。共享调度资源池:SQL任务、Virtual等共享资源任务消耗的调度资源极少,系统默认预订一定额度的...
运维监控支持查看工作组内和租户内的任务概览,包括今日失败实例、当前任务流总数、当前任务总数、今日实例总数、实例统计、历史实例运行统计,以便了解 数据资源平台 的任务全局信息。本文介绍了查看全局概览。查看全局概览 登录 数据资源...
运维大屏为您展示工作空间的运维稳定性评估、重点关注的运维指标、调度资源使用及周期任务运行概况,以及数据集成同步任务的运行详情,助力您从宏观角度快速了解空间任务的整体概况,及时发现并处理异常任务,提升运维效率。使用说明 运维...
调度资源组主要用于调度任务,资源有限,并不适合用来完成计算任务。MaxCompute具有海量数据处理能力,推荐您通过MaxCompute进行大数据计算。如何设置任务优先级?您可以通过设置节点所在基线的优先级来实现节点优先级调整。基线优先级高...
运维监控支持查看工作组内和租户内的任务概览,包括今日失败实例、当前任务流总数、当前任务总数、今日实例总数、实例统计、历史实例运行统计,以便了解 企业数据智能平台 的任务全局信息。本文介绍了查看全局概览。查看全局概览 登录企业...
使用限制 当存在关联转组任务时,主资源和关联资源都不允许通过控制台或API操作转组,您需要等待任务结束后再进行操作。当启用了关联转组功能后,为避免冲突,不支持同时对主资源和关联资源操作手动转组。您可以仅对主资源进行转组,关联...
任务 一个作业由一组任务(Task)及其依赖关系组成。批量计算支持能以有向无环图 DAG(directed acyclic graph)形式描述的作业。任务间的依赖关系只能在作业提交时指定,提交完成后不能修改。实例 每个任务可以有一个或多个执行实例...