工作流概述
Designer 默认为您提供两个工作流文件夹：我的工作流 和 工作空间公开工作流，分别用于分类存储 仅自己可见 的工作流和 工作空间内公开可见 的工作流，同时您也可以在这两个文件夹下再新建文件夹，根据业务分类需要进一步做文件夹分类，...
迁移实施
在线迁移前会检查源地址和目的地址的文件，但是若您源和目的地址有相同文件名的文件，且在迁移任务中配置了覆盖方式为覆盖，迁移时会直接覆盖目的地址的文件。若两个文件内容不同，必须更改文件名或做好备份。在线迁移会保留源文件的最后...
集成对象存储OSS
在设置Prefix的基础上，将Delimiter设置为正斜线（/）时，返回值就只列举该文件夹下的文件，文件夹下的子文件夹名返回在CommonPrefixes中，子文件夹下递归的所有文件和文件夹不显示。例如，一个Bucket中有三个Object，分别为fun/test.jpg、...
UploadAudioData-上传音频质检
任务执行效率说明 任务执行的快慢，取决于录音文件转文本的快慢，理想情况下，一个长度为 5 分钟的录音文件，可以在 2 分钟内转写完成，但是遇到文件转写服务排队任务较多时，会有一个排队等待的时间，一般会在 6 小时内转写完成，一次性...
400错误
Content-Type 字符串 否 application/octet-stream 请求内容的类型，也可以为空。Date 字符串 是 Sun,22 Nov 2015 08:16:38 GMT 此次操作的时间，Date必须为GMT格式且不能为空。重要 如果请求中的Date时间和OSS服务器的当前时间差15分钟...
UploadMediaByURL-URL批量拉取上传
基于源文件URL，拉取音视频媒体文件进行上传，支持批量上传。接口说明 请确保在使用该接口前，已充分了解视频点播产品的收费方式和价格。媒资文件上传到视频点播中会产生存储费用，计费详情，请参见 媒资存储计费。如果您已开通了存储传输...
设备管理
beginTime 字符串 文件开始时间，格式yyyy-MM-dd HH:mm:ss endTime 字符串 文件结束时间，格式yyyy-MM-dd HH:mm:ss recordType 整型 录像类型 streamType 整型 码流类型 fileName 字符串 文件名 fileSize 整型 文件大小 snapshotUrl 字符串...
创建项目
开通产品后，您可以通过控制台创建项目。本文介绍如何通过控制台创建项目。操作步骤 登录 智能媒体管理控制台。在页面左上角，选择需要创建项目的地域，如下图所示。重要 为了减少跨网络的时延和成本，项目只能处理相同地域的OSS中的数据，...
在云桌面内挂载CPFS文件系统
您可以在阿里云控制台创建CPFS文件系统，通过NFS协议服务把CPFS文件系统挂载至对应工作区下的无影云桌面，挂载成功后便可以在云桌面上把CPFS文件系统当作一个普通的目录来访问和使用。本文介绍如何将CPFS文件系统挂载至云桌面以及如何验证...
UploadMediaByURL-URL拉取上传
调用UploadMediaByURL基于源文件URL，拉取音视频媒体文件进行上传，支持批量上传。接口说明 如果配置了回调，则上传完成后会收到 URL 上传视频完成的事件通知，可以通过获取 URL 上传信息接口查询上传状态。上传任务提交成功后，会在云端...
配额与限制
保留字符 TBW102 BenchmarkTest SELF_TEST_TOPIC OFFSET_MOVED_EVENT SCHEDULE_TOPIC_XXXX RMQ_SYS_TRANS_HALF_TOPIC RMQ_SYS_TRACE_TOPIC RMQ_SYS_TRANS_OP_HALF_TOPIC 特殊前缀 rmq_sys_%RETRY%DLQ%rocketmq-broker-Topic命名应该尽量...
自定义输入
从视频文件中获取流 我们可以使用浏览器提供的HTMLMediaElement的 captureStream 方法，实现在JS中从视频文件中获取其视频流、音频流。const videoElement=document.createElement('video');videoElement.width=320;可以自行定义视频元素的...
导出与导入工作流
您可以将自己或他人导出的JSON格式的工作流文件导入到您的工作空间内，来创建新的工作流。原工作流中的组件及其配置会一起导入到新的工作流中。您可以在此基础上修改组件或组件配置，进行模型构建。本文为您介绍如何导出及导入工作流。前提...
应用场景
多媒体文件处理 使用 云工作流 可以帮助您将多个任务，如转码、截帧、人脸识别、语音识别、审核上传等，编排成一个完整的处理流程，通过 函数计算，提交媒体处理（IMM）任务，或自建处理器，产出一个符合业务需求的输出。各任务的执行错误...
目录配额
当您需要对通用型NAS文件系统中某个目录所能包含的文件数量或者文件大小或者某个用户所能使用的资源进行限制时，您可以通过配额管理功能中的目录配额或用户配额进行配置。同时，同一个路径下，您还可以为多个用户设置不同的资源配额。前提...
常见问题
问题列表 什么是云工作流？云工作流的工作原理是什么？云工作流的优势是什么？云工作流最长执行多长时间？怎么执行云工作流？云工作流使用什么语言编写流程？云工作流是集成了云监控？云工作流是否集成了事件源？什么是 云工作流？云工作流...
CSV文件
false false 声明是否应跳过读取中的前导空格 Both ignoreTrailingWhiteSpace true，false false 声明是否应跳过读取中的尾部 空格 Both nullValue 任意字符串字符""声明在文件中什么字符表示null值 Both nanValue 任意字符串字符 NaN 声明...
CreateDataFlowTask-创建数据流动任务
您可以在控制台文件系统详情页面查看版本信息。仅支持在 Running（正常）状态的数据流动上创建数据流动任务。数据流动任务是异步执行的，您可通过 DescribeDataFlowTasks 查询任务执行状态。任务的耗时取决于需要导入、导出的数据量。如果...
使用OSS Foreign Table进行数据湖分析
filetype 字符串 否 文件类型，取值范围如下：plain（默认）：按字节二进制读取，不做额外处理。gzip：读取原始二进制数据并使用GZIP解压缩。snappy：读取原始二进制数据并使用SNAPPY解压缩。仅支持标准格式的SNAPPY压缩，暂不支持HADOOP-...
新功能发布记录
2020-09-30 全部 什么是文件存储CPFS 文件存储CPFS 1.0（商用）文件存储CPFS 1.0版本提供高可用、高可靠、高可扩展、高性能的能力，适用各种高性能计算HPC场景。2019-08-09 部分 什么是文件存储CPFS 文件存储CPFS（公测）CPFS并行文件系统...
触发工作流
媒体处理中工作流的触发方式根据文件路径以及自动触发的设置情况，一共可分为3种触发方式。本文介绍不同工作流触发方式的适用场景和要求。触发方式对比 触发方式 适用场景 自动触发 文件上传到指定路径后立即按固定流程处理 手动 触发...
添加媒体Bucket
说明 完成创建 Bucket输入、Bucket输出 存储路径后，您可以在工作流中绑定存储路径，通过OSS上传文件后自动触发工作流执行并生成媒体文件。上传视频文件，请参见 OSS上传文件。（可选）步骤三、设置防盗链 重要 在媒体处理MPS为输入媒体...
数据流动概述
CPFS智算版文件系统与对象存储OSS之间已实现数据流动。您可以通过创建数据流动任务实现不同源端的数据同步。背景信息 当CPFS智算版文件系统中的目录与OSS Bucket创建数据流动后，通过创建数据流动任务，可以完成数据的高速传输。传输完成后...
使用OSS Foreign Table导出数据
format 字符串 是 文件格式，取值范围如下：csv text orc filetype 字符串 否 文件类型，取值范围如下：plain（默认）：按字节二进制读取，不做额外处理。gzip：读取原始二进制数据并使用GZIP解压缩。说明 仅支持CSV和TEXT格式的文件。...
回收站
文件恢复任务取消后，已恢复的文件可以在文件系统中查询到，未恢复的文件可以在回收站中查询。文件彻底删除任务取消后，已彻底删除的文件或目录不支持找回，未彻底删除的文件或目录可以在回收站中查询。在 回收站 页签，单击 任务管理 页签...
媒资搜索协议
分级存储类型：StorageClass 取值 描述 备注 Standard 标准存储 整个媒资的音视频类资源（包含源文件、转码后的流文件，不包含截图等资源）存储类型为标准存储。IA 低频访问 整个媒资的音视频类资源（包含源文件、转码后的流文件，不包含...
Kafka Rebalancer工具介绍
kafka-rebalancer.sh-bootstrap-server core-1-1:9092-zookeeper master-1-1:2181/emr-kafka-rebalance-throttle 100000000-threshold 0.1 保存打印在“Current partition replica movement”之后的JSON字符串到文件 move.json 中。...
HTTP2连云HAL
HAL_Fopen 接口原型 void*HAL_Fopen(const char*path,const char*mode)接口说明 指定文件路径及模式打开一个文件，返回文件流。参数说明 参数 数据类型 方向 说明 path char*输入 文件路径。mode const char*输入 打开文件的方式，与c标准...
创建工作流
如果需要制作多码率、多音轨、多字幕或多格式等类型视频，或希望预先编排好一系列任务流程，然后按照编排好的环节和条件依次执行任务，您可以创建工作流并在工作流中设置转码、分析、截图、打包（封装）、审核、提取视频DNA、设置智能封面...
CreateDataFlow-创建数据流动
创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中，才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
如何解决Windows系统文件上传到Linux系统中显示乱码的...
一般W indows系统默认使用GB2312的字符编码，可以在创建记事本文件的时候修改字符编码格式，选择 另存为，编码 格式选择 UTF-8 即可，如下图所示。注：此方法以Windows7操作系统为例。修改Office文件的字符编码，选择 另存为，单击 工具，...
什么是Serverless工作流
在 Serverless 工作流 中，您可以用顺序、分支、并行等方式来编排分布式任务，Serverless 工作流 会按照设定好的步骤可靠地协调任务执行，跟踪每个任务的状态转换，并在必要时执行您定义的重试逻辑，以确保工作流顺利完成。Serverless 工作...
什么是云工作流（CloudFlow）
在 云工作流 中，您可以用顺序、分支、并行等方式来编排分布式任务，云工作流 会按照设定好的步骤可靠地协调任务执行，跟踪每个任务的状态转换，并在必要时执行您定义的重试逻辑，以确保工作流顺利完成。云工作流 通过提供日志记录和审计来...
使用限制
本文介绍CPFS的文件系统限制、客户端限制、Fileset限制、数据流动限制、协议服务限制及容量监控限制。文件系统 限制项 阈值 说明 单个文件系统可创建的挂载点数量 1个 单个CPFS文件系统最多支持创建一个挂载点。单个客户端挂载文件系统个数...
管理数据流动
在实现CPFS智算版文件系统与OSS Bucket之间的数据流动之前，需要确保已经创建了对应的数据流动。本文介绍如何在文件存储控制台创建并管理CPFS智算版数据流动。前提条件 源端OSS Bucket已设置标签（key:cpfs-dataflow,value:true）。在数据...
查询文件
本文主要介绍如何使用Python SDK的SelectObject查询CSV和JSON文件。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的Region与Endpoint的对应关系，请...
LiveTail
过滤字符串 您可以在 过滤条件 文本框中设置需要包含的一个或多个字符串。设置完成后，监控列表只显示包含设置的字符串的日志。过滤字段 您可以在 字段过滤 下拉列表中设置需要过滤的一个或多个字段。设置完成后，监控列表不显示设置的过滤...
数据流动概述
文件存储CPFS与对象存储OSS之间已实现数据流动。您可以通过创建数据流动任务实现不同源端的数据同步。背景信息 当CPFS Fileset 与OSS Bucket创建数据流动后，CPFS文件系统会自动同步OSS Bucket中的对象元数据。同步完成后您能通过高性能且...
读写访问文件类问题
当您访问文件系统中的文件时，文件系统中的文件会受到某些限制影响，导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...
模型及数据常见问题
方法2：对于大于1 GB的CSV文件，可以自行上传至OSS Bucket后，使用 读CSV文件 组件来读取。方法3：前往DataWorks数据开发中进行建表和数据上传，详情请参见 建表并上传数据。PAI Designer/Studio中的数据展示出现blob字符 现象描述 在画布...
- 产品推荐
- 这些文档可能帮助您