改密任务
支持的操作系统 操作系统名称 版本 Alibaba Cloud Linux 3.2104 64位 2.1903 LTS 64位 2.1903 64位快速启动版 CentOS CentOS 8.5 CentOS 7.8 CentOS Stream 8 CentOS 6.10 Ubuntu Ubuntu 20.04 64位 Ubuntu 18.04 64位 Ubuntu16.04 32位 ...
运维中心入门
方式一：在周期任务列表，单击目标任务 操作 列的 测试。方式二：在目标任务的DAG图，右键单击该任务，选择 测试。配置任务测试运行的业务日期及运行时间，单击 确定。任务测试运行时会生成测试实例，您可进入 周期任务运维>测试实例 页面...
计算资源
计算资源常指用于执行计算任务的软硬件资源，包括CPU、GPU、内存、操作系统和特定计算任务的软硬件环境等。计算资源的主要作用是执行各种计算任务，包括数据处理、算法运算、业务逻辑执行等。计算资源的性能和容量直接影响到系统的计算能力...
如何在SchedulerX 2.0平台上托管XXL-JOB任务
丰富的可视化能力 查看用户大盘 查看任务历史记录 查看用户运行日志 查看任务运行堆栈 查看任务操作记录 高级特性 任务编排 支持工作流（DAG）进行任务编排，可通过拖拽对前端进行操作。详细的任务状态图方便您了解下游任务执行失败的原因...
任务菜单
除了任务内容的编辑与修改外，在任务面板右上角的下拉菜单中，可以选择对任务的更多操作。如果打开的下拉菜单中没有显示如图的所有操作，说明该操作需要项目管理员、拥有者、相应自定义角色或任务创建者才可进行，请联系有权限的同事协助...
上线实时任务
前提条件 已新增实时任务，具体操作，请参见 新增实时任务、新增多表实时任务。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 ...
上线实时任务
前提条件 已新增实时任务，具体操作，请参见 新增实时任务、新增多表实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 图标，...
查看并管理手动任务
1次批量操作最多勾选100个手动任务。修改运维责任人 同时修改多个任务的运维责任人。说明 仅支持选择本项目内的成员。仅适用于Prod和Basic项目。修改优先级 支持同时修改多个任务的优先级。修改任务的优先级后，再次调度按照最新优先级调度...
查看并管理手动任务
1次批量操作最多勾选100个手动任务。修改运维责任人 同时修改多个任务的运维责任人。说明 仅支持选择本项目内的成员。仅适用于Prod和Basic项目。修改优先级 支持同时修改多个任务的优先级。修改任务的优先级后，再次调度按照最新优先级调度...
新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
Spring任务
Spring定时任务为您在Java体系下定时任务开放提供了便捷方式，但其便捷的同时也有很多企业化场景下的局限性。通过对接SchedulerX任务调度可快速实现企业化运用的支持。前提条件 客户端1.7.10及以上版本 采用Spring Boot模式接入SchedulerX...
新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
调度策略
如果第一个任务等待出队时间超过预定时间（一般为几分钟），则系统会按照 遍历策略 尝试对第一个任务和第二个任务进行出队操作。如果第二个任务等待出队时间也超过预定时间，系统会对第一个、第二个和第三个任务按照 遍历策略 尝试出队操作...
调度任务
创建手动调度任务 操作步骤：选择工作空间>配置管理>数据接入管理>数据导入>调度任务。单击右上角 新建调度任务。在弹窗中填写任务名称，选择要调度导入的数据表，支持多选、全选。调度频次选择 手动调度。单击 保存，完成调度任务创建。...
冻结或解冻任务流
使用场景 当任务流B的上游任务流A存在异常时，可以冻结下游任务流B（若有多个任务流可批量冻结），B不会继续运行，也不会丢失依赖关系。当A恢复正常后，解冻下游任务流B，B会再次运行。集群计算资源不足，需要优先保障某些任务流运行，可以...
Tensorboard
在目标任务 操作 列下，单击 Tensorboard，在弹出的 Tensorboard 面板中，单击 新建Tensorboard。在 新建Tensorboard 页面中，配置以下参数，然后单击 确定。基本信息 参数 描述 Tensorboard名称 自定义Tensorboard实例名称。Tensorboard...
管理任务流实例
本文为您介绍如何编辑任务流、运行任务流、下线任务流以及查看任务流的发布记录。编辑任务流信息 仅支持任务流的责任人编辑任务流。进入目标任务流的编辑页面后，单击目标任务流页面的右上角 前往运维。在任务流信息页面，单击 前往编辑。...
语音转译
任务名称：系统会根据当前时间自动生成一个任务名称，用户也可以自行修改。数据集：数据集支持多选，数据集主要来自数据集管理中，需要先前往维护后选择。语言模型：系统默认提供通用模型，也可以前往语音模型中进行配置。热词模型：热词...
新增脚本同步任务
相关操作 操作 说明 查看同步任务 在任务列表中，单击目标同步任务 操作 列的 更多，选择 查看，可查看同步任务详细内容。修改同步任务 在任务列表中，对于未运行的同步任务，单击 操作 列的 更多，选择 修改，可对同步任务进行修改。删除...
API概览
CancelAutoSnapshotPolicy 取消一个或者多个文件系统的自动快照策略 取消一个或者多个文件系统的自动快照策略。DescribeAutoSnapshotPolicies 查询已创建的自动快照策略 查询已创建的自动快照策略。DescribeAutoSnapshotTasks 查询自动快照...
新增脚本同步任务
相关操作 操作 说明 查看同步任务 在任务列表中，单击目标同步任务 操作 列的 更多，选择 查看，可查看同步任务详细内容。修改同步任务 在任务列表中，对于未运行的同步任务，单击 操作 列的 更多，选择 修改，可对同步任务进行修改。删除...
全球消息路由
批量启停任务 云消息队列 RocketMQ 版 支持批量启停任务，当您的业务使用了多个消息路由任务，为了提高维护操作效率，您可以使用批量启停功能一键启停多个任务。在 全球消息路由 页面的任务列表中，选中需要批量启停的多个任务，单击列表...
查看并管理脚本任务
脚本任务页面包含计算任务、同步任务和集成任务，每个任务对应一个调度节点，本文以节点视角为您介绍如何查看并管理脚本任务。脚本任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 ...
故障演练
每个任务最多只能添加16个资源。演练方式 选择演练方式。取值：立即开始：演练任务创建成功后立即开始执行演练。暂不演练：仅创建演练任务，暂不执行演练。设置演练任务的演练时长。默认为180分钟，最大值72小时，最小值1分钟。描述 输入...
数仓开发任务流
每个项目空间内可以创建多个业务场景，每个业务场景下又可添加多个任务流，用于实现复杂的数据处理和任务调度。前提条件 已创建项目空间。具体操作，请参见 创建项目空间。创建数仓开发任务流 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 ...
基本概念
节点实例的状态如下：运行中（RUNNING）暂停（SUSPEND）失败（FAIL）成功（SUCCESS）终止中（KILLING）跳过（SKIPPED）取消（CANCELLED）排队中（QUEUED）任务流 任务流是由多个任务节点组合编排出的任务组，任务之间可以有依赖关系，整个...
基本概念
名称 定义 模板 一个YAML或JSON格式的文件，包括一个或多个任务。任务 模板的主要组成部分，定义了具体的动作细节。每一个任务都是一个动作的具象化使用。动作 定义了一个具体的操作，为操作的最小单位。动作分为几种类型：API动作（Atom ...
CreateDataFlowTask-创建数据流动任务
Import DataType string 否 数据流动任务操作的数据类型。取值：Metadata：文件的元数据，包括文件的 timestamp、ownership、permission 等属性信息。选择 Metadata，只会导入文件的元数据，用户只能看到该文件，但访问该文件数据时，数据...
模板结构
模板定义了版本、参数、任务、顺序、输入和输出等，您可以通过执行模板来定义需要的运维操作。语法 YAML格式-FormatVersion:OOS-2019-06-01#必填，版本，OOS-2019-06-01 Description:""#可选，描述，可用于说明模板的用途，目的等。...
基线管理
单个任务添加至基线 单击目标周期任务 操作 列的 更多>添加基线监控。批量添加任务至基线 勾选多个周期任务，在底部菜单栏选择 操作>添加基线监控。管理基线 您可在基线管理页面根据 责任人、工作空间、基线名称、优先级 等条件进行精确...
概述
任务调度 TS（Task Scheduler）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和...
执行补数据并查看补数据实例（新版）
搜索任务 通过名称或ID搜索，添加一个起始任务，以及一个或多个结束任务，平台将根据起始及结束任务分析中间任务（即中间任务为起始任务的直接或间接下游任务，为结束任务的直接或间接上游任务）。中间任务列表 平台根据起始任务及结束任务...
DataWorks作业调度
使用DataWorks可以使云原生数据仓库PostgreSQL版获得任务开发、任务依赖关系管理、任务调度、任务运维等全方位强大的能力，进一步增强分析型数据库PostgreSQL版的ETL能力。本文将介绍如何使用DataWorks来调度云原生数据仓库PostgreSQL版的...
语义意图标注
句子字数限制：填写后，系统将满足字数条件限制的会话语句进入待标注任务 最多标注语句数：即表中任务中包含待标注语句数的最大量。说明 包含关键词：可以输入多个关键词，关键词之间用逗号隔开，包含其中任意一个关键词都可命中，最多输入...
管理发布任务
启动 您可以启动新创建或暂停中的发布任务，单击发布任务操作栏 启动。启动后该发布任务会立即生效。暂停 如果需要暂停某个发布任务，您可以单击该发布任务操作栏 暂停。暂停后该发布任务将停止发布。终止 如果不再需要某个发布任务，您...
补数据
补数据基于任意任务流的发布态版本，可通过指定业务时间或业务范围时间，生成一个或多个任务流实例（运行某条任务流的记录）。本文为您介绍如何给任务流补数据。使用场景 电商公司在多个时间段进行促销活动，需要分析促销活动带来的营收、...
互斥量
而信号量按照起始的计数值的配置，可以存在多个任务获取同一信号量的情况，直到计数值减为0，则后续任务无法再获取信号量，当信号量的计数初值设置为1，同样有互斥的效果。但信号量无法避免优先级反转问题。优先级反转 优先级反转是一种不...
任务配置
将任务节点连线，形成工作流当任务流中包含多个任务节点时，连线上游节点的输出，将自动作为下游节点的输入数据集。保存工作流并发布运行。任务节点说明 下文为您说明各任务节点的配置，您可根据业务需求选择一个或多个节点构建所需任务流...
离线任务监控概述
任务级监控：在任务级下您可为多个任务配置相同的监控报警规则，也可为一个任务配置多个不同的监控报警规则。配置任务级监控，请参见 配置任务监控报警规则。项目级监控：在项目级下您可为当前项目中所有任务或通过任务类型（任务类型+调度...
离线任务监控概述
任务级监控：在任务级下您可为多个任务配置相同的监控报警规则，也可为一个任务配置多个不同的监控报警规则。配置任务级监控，请参见 配置任务监控报警规则。项目级监控：在项目级下您可为当前项目中所有任务或通过任务类型（任务类型+调度...
- 产品推荐
- 这些文档可能帮助您