新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
全球消息路由
计费影响 全球消息路由为 云消息队列 RocketMQ 版 的高级功能，使用该功能会带来额外的费用，包含消息传输费用和任务资源占用费用。更多信息，请参见 全球消息路由定价详情。地域限制 目前仅公网地域不支持全球消息路由功能，其他地域均...
基本概念
节点实例的状态如下：运行中（RUNNING）暂停（SUSPEND）失败（FAIL）成功（SUCCESS）终止中（KILLING）跳过（SKIPPED）取消（CANCELLED）排队中（QUEUED）任务流 任务流是由多个任务节点组合编排出的任务组，任务之间可以有依赖关系，整个...
管理任务流实例
本文为您介绍如何编辑任务流、运行任务流、下线任务流以及查看任务流的发布记录。编辑任务流信息 仅支持任务流的责任人编辑任务流。进入目标任务流的编辑页面后，单击目标任务流页面的右上角 前往运维。在任务流信息页面，单击 前往编辑。...
语音转译
需要注意语音转译将产生转译费用，二次转译会重新产生费用。创建转译任务前需要前往数据集管理中上传需要转译的语音数据集。新建转译任务 点击左上角的 新建语音转译任务 即可呼出转译任务创建窗口。任务名称：系统会根据当前时间自动生成...
任务看板跟进
可以直接在「任务」应用下选择多个任务类型查看属于同一个工作流程下的任务，关注进展，方便管理。点击看板右上角的视图还能切换为「看板视图」、「表格视图」、「时间视图」和「列表视图」四种方式，可以从不同的角度和方式查看整个项目的...
模型评测
计费说明 使用模型评测时需要收取OSS存储费用和DLC的评测任务费用，计费详情参见 OSS计费概述 和 通用计算资源（DSW/DLC）计费说明。数据准备 模型评测功能支持基于自定义数据集和公开数据集（例如C-Eval）完成评测。公开数据集：已经由PAI...
任务看板跟进
可以直接在「任务」应用下选择多个任务类型查看属于同一个工作流程下的任务，关注进展，方便管理。点击看板右上角的视图还能切换为「看板视图」、「表格视图」、「时间视图」和「列表视图」四种方式，可以从不同的角度和方式查看整个项目的...
查看并管理手动任务
手动任务是已提交至运维中心，且调度类型为手动节点的任务。手动任务不会自动运行，只有手动触发运行才会生成实例。本文为您介绍手动任务运维功能。手动任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照...
冻结或解冻任务流
使用场景 当任务流B的上游任务流A存在异常时，可以冻结下游任务流B（若有多个任务流可批量冻结），B不会继续运行，也不会丢失依赖关系。当A恢复正常后，解冻下游任务流B，B会再次运行。集群计算资源不足，需要优先保障某些任务流运行，可以...
改密任务
停止 如果在某段时间内无需使用某个或多个任务，您可以执行停止任务操作。在 改密任务 页面，选中需要停止的改密任务，单击 停止。停止任务后，改密任务的状态将变更为 已取消，该任务将不会再自动执行，您也无法立即执行该任务。启用 如果...
通过运维中心管理任务流与任务流实例
本文介绍在任务编排运维中心如何编辑任务流、查看任务流的执行耗时和运行信息、控制任务流中执行的SQL数量等内容。进入任务编排运维中心 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 运维管理>任务编排运维中心。说明 若您使用的是极简...
查看并管理手动任务
手动任务是已提交至运维中心，且调度类型为手动节点的任务。手动任务不会自动运行，只有手动触发运行才会生成实例。本文为您介绍手动任务运维功能。手动任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照...
计费概述
本文介绍分布式任务调度SchedulerX的各计费项及其计费规则。基本概念 任务类型：调度任务的类型。包含单机任务和非单机任务（广播、分片、并行和网络任务等）。任务调度总量：通过SchedulerX配置并启用的分布式任务调度总规模，单位为CU...
DataWorks作业调度
使用DataWorks可以使云原生数据仓库PostgreSQL版获得任务开发、任务依赖关系管理、任务调度、任务运维等全方位强大的能力，进一步增强分析型数据库PostgreSQL版的ETL能力。本文将介绍如何使用DataWorks来调度云原生数据仓库PostgreSQL版的...
任务
任务（Task）是MaxCompute的基本计算单元，用户通过编写SQL或者MapReduce程序来表达数据处理的逻辑，然后提交这些程序到MaxCompute服务上执行，MaxCompute会把这些程序转换为一个或多个任务，并在分布式环境中并行执行。对于您提交的大多数...
基本概念
任务模板和任务的关系，类似面向对象程序设计中的类和对象的关系，任务模板是静态的概念，任务是动态的概念，可以根据单个任务模板批量创建多个任务。任务记录 任务执行的记录。可以查看和删除创建过的任务的执行记录，并支持通过状态筛选...
执行补数据并查看补数据实例（新版）
搜索任务 通过名称或ID搜索，添加一个起始任务，以及一个或多个结束任务，平台将根据起始及结束任务分析中间任务（即中间任务为起始任务的直接或间接下游任务，为结束任务的直接或间接上游任务）。中间任务列表 平台根据起始任务及结束任务...
概述
任务调度 TS（Task Scheduler）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和...
热词分析
如上图所示，周期性任务的任务结果，在一次性任务的任务结果基础上，多了以下两个功能：查看某个热词在多次任务结果中的变化趋势 热词变化率TOP5 热词变化率：本次任务结果中的热词次数与上一次任务结果中的热词次数相比的变化情况；...
触发器
执行任务会产生相应的费用。更多信息，请参见 计费项。查询触发器 登录 OSS管理控制台。在左侧导航栏，单击 Bucket列表，然后单击目标Bucket。在左侧导航栏，选择 数据处理。根据您需要处理文件的类型，选择 文档处理、媒体处理 或其他由...
并发数和构建时长
计费规则 流水线是由多个任务组成，而一个任务则是由多个步骤组成 如下图所示，该流水线包含两个任务：Java 构建上传 主机部署 而”Java 构建上传”任务包含两个步骤：Java 构建 构建物上传 Flow 根据 任务 的运行状态来统计企业并发数和...
批处理
执行任务会产生相应的费用。更多信息，请参见 计费项。查询批处理 登录 OSS管理控制台。在左侧导航栏，单击 Bucket列表，然后单击目标Bucket。在左侧导航栏，选择 数据处理。根据需要进行数据处理的文件类型选择 文档处理、媒体处理 或其他...
常见问题
目前Proxima CE不支持相同输入doc的多个任务同时执行，因为多个任务同时执行会导致索引的坏写，比如A任务写了某份索引，B任务会覆盖，这样会导致各种问题，常见问题如下：底层OSS Volume Filesystem相关的错误。build过程失败，提示 jni ...
补数据
补数据基于任意任务流的发布态版本，可通过指定业务时间或业务范围时间，生成一个或多个任务流实例（运行某条任务流的记录）。本文为您介绍如何给任务流补数据。使用场景 电商公司在多个时间段进行促销活动，需要分析促销活动带来的营收、...
调度策略
对于优先级在1至6之间的任务，则采用 遍历策略 进行调度，并且这些任务在队列中的位置将随着排队时间的增加而逐步前移，最多可前移至6级任务的位置。其中：Item1、Item2优先级≥7；Item3~ItemN优先级。相关文档 在创建资源配额时，您可以...
工作流配置
当任务被移动到结束状态时，自动被标记为完成，可设置或添加多个任务列表在结束状态。③ 点击「添加状态」按钮，可进行列表状态的新增。④ 流转设置规定了勾选下的任务列表中的任务可以被拖动到哪一个任务列表下，对应不同的状态。⑤ 通过...
查看并管理脚本任务
脚本任务页面包含计算任务、同步任务和集成任务，每个任务对应一个调度节点，本文以节点视角为您介绍如何查看并管理脚本任务。脚本任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 ...
数仓开发任务流
每个项目空间内可以创建多个业务场景，每个业务场景下又可添加多个任务流，用于实现复杂的数据处理和任务调度。前提条件 已创建项目空间。具体操作，请参见 创建项目空间。创建数仓开发任务流 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 ...
开始模型训练
您在同一个画布中发起多个任务时，新任务产生的输出表将覆盖旧任务的输出表。如需保存指定任务的输出表，可在 任务列表 中，单击任务后的 点击保存，保存指定任务。说明 只能保存最新的一条任务，且该任务必须已执行成功。如果任务已被覆盖...
迁移时源库为PolarDB MySQL版的注意事项及限制
如果迁移的源集群为 PolarDB MySQL版，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为PolarDB MySQL版的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及限制：PolarDB MySQL版...
Tensorboard
您可以单击 添加 按钮，为每个Tensorboard挂载多个Summary目录，以便跨多个任务比较各项指标。资源配置 支持选择以下两种资源类型：资源类型 描述 免费资源 提供一定的免费实例额度。付费资源 超出免费额度时，您可以选择使用付费资源来...
离线任务监控概述
任务级监控：在任务级下您可为多个任务配置相同的监控报警规则，也可为一个任务配置多个不同的监控报警规则。配置任务级监控，请参见 配置任务监控报警规则。项目级监控：在项目级下您可为当前项目中所有任务或通过任务类型（任务类型+调度...
离线任务监控概述
任务级监控：在任务级下您可为多个任务配置相同的监控报警规则，也可为一个任务配置多个不同的监控报警规则。配置任务级监控，请参见 配置任务监控报警规则。项目级监控：在项目级下您可为当前项目中所有任务或通过任务类型（任务类型+调度...
Spring任务
Spring定时任务为您在Java体系下定时任务开放提供了便捷方式，但其便捷的同时也有很多企业化场景下的局限性。通过对接SchedulerX任务调度可快速实现企业化运用的支持。前提条件 客户端1.7.10及以上版本 采用Spring Boot模式接入SchedulerX...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
任务类型
1.背景 一个作业（Job）由一组任务（Task）及其依赖关系组成，每个任务可以有一个或多个执行实例（Instance）。具体详情看 名词解释。目前的任务类型分为两种：并发任务和 DAG(Directed Acyclic Graph)任务。2.任务概述 2.1 并发任务 ...
任务配置
将任务节点连线，形成工作流当任务流中包含多个任务节点时，连线上游节点的输出，将自动作为下游节点的输入数据集。保存工作流并发布运行。任务节点说明 下文为您说明各任务节点的配置，您可根据业务需求选择一个或多个节点构建所需任务流...
语义意图标注
功能介绍 意图的“包含语句”极大地影响意图模型识别客服或客户意图的准确率，所以除了在新建意图时添加意图的“包含语句”外，还可以通过建立 意图标注任务 完成有关意图“包含语句”的更新扩充，以此提高意图模型的准确率，并减轻相关...
离线同步任务调优
文档概述 同步速度受同步任务本身配置、数据库、网络等多方面影响，详情请参见：数据同步速度的影响因素。同步任务整体速度慢可能出现在同步过程的各个阶段，本文以现象入手，为您提供各个阶段运行慢的解决方案，详情请参见：数据同步慢的...
- 产品推荐
- 这些文档可能帮助您