机器学习的审计事件
ListPipelineRunNodeOutputs 查询工作流任务的Node的输出列表。ListPipelineRunNodeStatus 列举工作流节点状态。ListPipelineRuns 查询工作流任务列表。ListPipelineRunsStatus 批量查询工作流任务或节点的状态。ListPipelines 查询工作流...
低成本跨境文件传输
本文介绍如何通过 Serverless 工作流、函数计算、对象存储、专用网络、云服务器及弹性公网IP的组合方案...弹性高效：一个文件同步触发一个 Serverless 工作流 任务，充分利用资源且高效同步。方案详情 具体步骤，请参见 低成本跨境文件传输。
调度资源组计费说明
规格名称 规格 资源数量 调度资源组 建议并发执行任务数上限 emr.w1.small 1 vCPU 2 GiB 2 任务提交至Yarn执行：16 任务不提交至Yarn执行：10 说明 任务提交至Yarn执行：配置工作流任务时开启 提交到Yarn执行 开关，所有的工作流任务将提交...
迁移Batch批量计算到分布式工作流Argo集群
支持复杂工作流任务的编排，可以应对数据处理、仿真计算、科学计算等复杂业务场景。计算环境采用阿里云弹性容器ECI，无需维护节点。大规模算力的按需使用，按量计费，避免工作流排队等待，提高效率，节省计算成本。功能映射 功能分类 Batch...
ack-ai-pipeline
您可以根据结果来对工作流任务进行调优。模型追溯：通过Tracking能力，能够记录每一次工作流运行中每个Step的输入和输出信息。您可以根据记录的内容进行问题排查或模型调优。使用说明 ack-ai-pipeline组件仅支持在ACK Pro版集群中安装，且...
工作流项目的创建
二、查看项目工作流 进入项目，点击「菜单」-「项目设置」，选择「任务设置」的「任务工作流设置」。打开设置界面展示了当前项目所使用的工作流，并且可根据需求新建工作流。icmsDocProps={'productMethod':'created','language':'zh-CN',}...
上传视频
上传方式 使用MPS控制台 在MPS控制台，通过指定工作流后，直接上传文件到工作流的输入节点设置的OSS输入路径中，并发起工作流任务。上传后的文件将在媒体列表中生成媒体文件，并注册媒资ID（MediaId）。前提条件 开通OSS服务，详细操作请...
工作流调度固定版本或预留资源函数
在 Serverless 工作流 任务步骤使用固定版本的函数将对以下场景产生帮助：流程A编排了多个函数f1、f2和f3，同一次任务必须执行函数的相同版本。假如流程A正在执行中，已执行完了函数f1，但是此时进行了函数更新，则正在执行的流程可能会...
创建并使用PAI Designer
后续您可在节点中进行对应工作流任务的开发与配置。步骤二：开发PAI Designer节点任务 简单示例 开发任务：编写Designer工作流 编辑PAI Designer节点任务时，如选择加载已有工作流，则需提前在PAI中创建Designer工作流，通过名称搜索，载入...
逻辑流操作
展示用户任务页面 打开工作流任务实例的用户任务页面。详情请参考 展示用户任务页面。自定义逻辑流操作 自定义逻辑流操作即根据实际业务需求自定义开发的逻辑流操作。关于创建自定义逻辑流操作的详细说明请参见 开发流程。
设置消息通知
步骤四、设置消息通知 为单任务设置消息通知 在创建单任务时选择对应任务类型的已绑定消息通知的管道，当加入到该管道中的非工作流任务状态更新时，会向指定的主题或队列发送消息通知。说明 管道类型需要与任务类型对应，例如：您需要创建...
Serverless工作流
在 Serverless工作流 任务步骤使用固定版本的函数将对以下场景产生帮助：流程A编排了多个函数f1、f2、f3，同一次任务必须执行函数的相同版本。假如流程A正在执行中，已执行完了函数f1，但是此时进行了函数更新，则正在执行的流程可能会执行...
数据湖构建的审计事件
StopBlueprintInstanceWorkflow 停止指定的工作流任务。StopCrawlerWorkflow 停止爬虫工作流。StopMigrationWorkflow 停止迁移工作流。SubmitQuery 提交查询。UnLock 解锁指定的元数据锁。UpdateCatalog 更新目录。UpdateCatalogSettings ...
创建工作流集群
工作流集群 采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。本文介绍如何创建 工作流集群。前提条件 已开通分布式云容器平台ACK...
GetPipeline-获取工作流
如何获取工作流任务ID，请参见 ListPipelineRuns。pipeline-hynm2bv8wqhp5e*返回参数 名称 类型 描述 示例值 object 返回结构体。RequestId string 请求ID。63EDFF2F-4D51-46F0-9D65-2F8F393B*PipelineId string 工作流ID。pipeline-hynm2...
基本概念
组件（Component）您在PAI工作流和工作流草稿中编辑以及工作流任务执行的最小单元。组件可以来源于：预置组件（Built-in Component）：PAI预置了基于阿里巴巴最佳实践的多类组件，涵盖从数据预处理到模型训练及预测的全流程。自定义组件...
工作流流转规则
配置入口：1、项目设置-任务设置-任务工作流设置-工作流配置-列表菜单-配置条件和后置动作 2、项目-任务列表菜单-配置工作流转规则-配置条件和后置动作 二、用户可配置的内容 1、执行条件 2、后续动作 指当任务流转到该状态后，将自动执行...
集成MNS队列
Serverless 工作流 任务（Task）步骤支持向某个指定的MNS队列中发送消息，本文介绍了MNS队列集成的使用场景、通用参数、集成模式以及权限配置。使用场景 任务步骤对MNS队列的集成有请求响应（requestResponse）模式和等待回调...
创建工作流
如果需要制作多码率、多音轨、多字幕或多格式等类型视频，或希望预先编排好一系列任务流程，然后按照编排好的环节和条件依次执行任务，您可以创建工作流并在工作流中设置转码、分析、截图、打包（封装）、审核、提取视频DNA、设置智能封面...
UpdatePipeline-更新工作流
如何获取工作流任务ID，请参见 ListPipelineRuns。pipeline-hynm2bv8*body object 否 请求Body。Manifest string 是 工作流定义，具体样例见下方请求参数补充说明。apiVersion:"core/v1"*工作流定义样例：该工作流由读数据表（data_source...
任务设置
Tips：在任务类型设置和任务工作流设置中，项目拥有者和项目管理员以及拥有权限的成员可进行编辑和修改，无权限的成员只能做查看。看板任务创建模式是仅针对当前项目生效。只有工作流项目的项目设置-任务设置中才会有任务工作流设置的选项...
转码模板概述
转码模板是一系列处理参数的集合，在创建转码任务或使用工作流时，可以使用模板简化操作。...使用转码模板提交工作流任务√说明 暂不支持使用预置智能模板提交任务。说明 支持使用预置智能模板提交任务。说明 支持使用预置智能模板提交任务。
任务配置
任务流配置说明 数据处理任务工作流的构建流程如下：点击“添加任务”按钮添加工作流任务，并设置工作流的调度类型。任务流名字：自定义。调度类型：自动调度（定时）或手工调度（手动赋值变量）。在系统节点列表中将所需节点拖拽至画布上...
通过工作空间管理权限
事件监控告警：跟踪和监控DLC任务或工作流任务的状态，或者基于AI资产管理-模型版本准入状态变化触发下游事件。资源调度：工作空间提供调度中心，您可以根据资源使用的组件、角色精细化分配资源配额；或任务最大运行时长和任务优先级，保证...
PAIFlow Manifest参数说明
公共格式 API版本和元信息 apiVersion:工作流格式的版本 metadata:name:工作流名 identifier:工作流标识 version:工作流版本 provider:工作流提供方 displayName:工作流显示名 annotations:工作流注解，目前只支持官方注解 字段名称 类型 ...
功能特性
注册及管理模型 任务 提供分布式训练任务、PAIFlow工作流任务的管理。任务管理 镜像 提供PAI官方镜像合集以及用户自定义镜像管理能力。查看并添加镜像 代码配置 支持用户将代码repo注册至PAI平台进行管理，方便在各产品模块中进行代码版本...
云原生数据仓库ADB的审计事件
CreateTaskDefinitionCode 创建工作流任务节点的Code。DeleteAccount 删除数据库账号。DeleteAirflowInstance 删除Airflow实例。DeleteDBCluster 删除集群。DeleteDBResourceGroup 删除资源组。DeleteDBResourcePool 删除资源池。...
导出开源引擎任务
后续可在 迁移助手>任务上云 的 调度引擎作业导入 页面，新建DolphinScheduler类型的导入任务，导入Zip文件并进行解析和转换，将DolphinScheduler工作流任务的代码、依赖关系转换为合适的DataWorks任务文件配置。使用限制 版本限制：仅支持...
视频水印（明水印）
在控制台创建工作流任务，详细操作请参见 创建工作流。其中水印模板相关参数需要按照下述步骤配置：说明 转码工作流和打包工作流支持添加图片水印，本文以打包工作流为例介绍，转码工作流同理。单击打包工作流拓扑结构中 视频提取 节点的 ...
工作流活动介绍
设置工作流任务完成后的媒体发布方式。名称 类型 必须 描述 PublishType String 否 全局配置。媒体发布类型。Manual：手动发布。工作流执行成功后，将媒体设置为未发布状态，之后您可以手动发布该媒体。请参见 管理媒体。Auto：所有活动...
CreateWorkflow-创建工作流
创建工作流，默认禁用状态，更新完DAG后，需要手动或者通过API启动用工作流，只有专业版才支持。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 调试 ...
API概览
SubmitLiveRecordJob 提交实时录制任务 调用SubmitLiveRecordJob提交实时录制任务，对直播流进行录制。GetLiveRecordJob 获取实时录制任务明细 调用GetLiveRecordJob获取单个实时录制任务明细。DeleteLiveRecordFiles 删除实时录制文件 ...
集成MNS主题
Serverless 工作流 任务步骤集成了MNS主题模型，支持将消息发布到MNS主题。通过设置发布消息参数可以实现主题消息推送，目前支持的推送类型有队列推送、HTTP推送和邮件推送。本文介绍集成MNS主题模型的模式及相关消息参数。集成模式 下文...
2019年
DB清理工作流任务实例，导致工作流无法恢复调度问题。Spring方式启动，不支持kill。无 1.0.3，2019-06-06 变更类型 功能描述 相关文档 新增 MapReduce模型支持返回所有子任务的结果，由Reduce处理。分布式模型支持拉模型，解决因为单机性能...
管理调度资源组
关联工作空间 4 在成功将工作空间与调度资源组进行关联后，您在执行工作流任务时便能够根据实际需求灵活选用已绑定的、符合预期资源配置的资源组。使用调度资源组 5 在使用过程中，您可以随时查看调度资源组的资源使用情况。查看调度资源组...
管理工作空间
您可以在事件中心创建消息通知规则，以跟踪和监控DLC任务或工作流任务的状态，或者基于AI资产管理-模型版本准入状态变化触发下游事件，详情请参见 工作空间事件中心。获取工作空间资源列表、添加成员等工作空间相关API，详情请参见 工作...
GetDag
Dag Type的类型：MANUAL：手动任务工作流 SMOKE_TEST：冒烟测试工作流 SUPPLY_DATA：补数据 BUSINESS_PROCESS_DAG：一次性业务流程工作流 Dag Status的类型：CREATED：已创建 RUNNING：运行中 FAILURE：运行失败 SUCCESS：运行成功 调试 您...
EnableWorkflow-启用指定工作流
启用指定工作流。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
DisableWorkflow-禁用指定工作流
禁用指定工作流。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
DeleteWorkflow-删除指定工作流
删除指定工作流。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
- 产品推荐
- 这些文档可能帮助您