工作流概述
工作流指媒体处理中的云端自动化处理工作流，音视频上传完毕后自动执行处理流程。本文介绍工作流的基本概念及使用方式。功能概览 基本概念 基本概念 说明 媒体工作流（MediaWorkflow）工作流是预先编排好的一系列任务流程，可以实现在指定...
API概览
本文为您介绍阿里云DDI提供的...创建工作流目录文件夹 调用CreateFlowCategory接口，创建工作流目录文件夹。获取目录树 调用DescribeFlowCategoryTree接口，获取目录树。查询工作流实例列表 调用ListFlowInstance接口，查询工作流实例列表。
上传视频
文件上传不完整可能导致转码失败，上传前请确认文档是否完整。上传方式 使用MPS控制台 在MPS控制台，通过指定工作流后，直接上传文件到工作流的输入节点设置的OSS输入路径中，并发起工作流任务。上传后的文件将在媒体列表中生成媒体文件，...
入门概述
在云桌面内挂载CPFS文件系统 通过NFSv3协议访问CPFS文件系统 协议服务 在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 ...
服务限流常见问题
本文汇总梳理了限流功能使用过程中遇到的常见问题。为什么服务限流配置后没有效果？排查步骤如下：确认 SOFA 的版本大于 3.3.0，如果低于这个版本，请升级版本。SOFA 版本说明，请参见 版本说明。接入动态配置客户端和服务限流。...
数据流动概述
文件存储CPFS与对象存储OSS之间已实现数据流动。您可以通过创建数据流动任务实现不同源端的数据同步。背景信息 当CPFS Fileset 与OSS Bucket创建数据流动后，CPFS文件系统会自动同步OSS Bucket中的对象元数据。同步完成后您能通过高性能且...
数据流动概述
CPFS智算版文件系统与对象存储OSS之间已实现数据流动。您可以通过创建数据流动任务实现不同源端的数据同步。背景信息 当CPFS智算版文件系统中的目录与OSS Bucket创建数据流动后，通过创建数据流动任务，可以完成数据的高速传输。传输完成后...
添加媒体Bucket
将OSS的Bucket在媒体处理MPS中绑定为输入媒体Bucket、输出媒体Bucket后，媒体处理MPS才有权限监听该Bucket上传完成的消息，以实现触发工作流执行和处理完成的文件回写动作。本文为您介绍如何通过媒体处理控制台添加媒体Bucket。前提条件 ...
新增媒体
向媒体库中新增媒体文件时，可以指定工作流ID触发工作流执行，对新增的媒体文件进行媒体处理。本文介绍通过Java SDK新增媒体并触发工作流执行的示例代码。说明 如果上传的目录满足工作流触发条件，则会触发工作流执行，否则不触发。更多...
CreateDataFlow-创建数据流动
创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中，才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
创建文件数据源
Quick BI支持将本地的Excel文件和CSV文件上传至数据库中，作为文件数据源，满足您不断变化和增长的业务分析需求。本文介绍上传文件的入口、如何创建并修改文件数据源。使用限制 限制说明 适用文件类型 单个文件表头必须放第一行，Sheet1不...
概述
物联网平台支持设备通过MQTT协议，将文件上传至用户的OSS空间或者物联网平台文件存储空间，以减少硬件资源的开销，并降低开发成本。本文介绍通过配置C Link SDK，帮助设备实现文件上传功能。前提条件 已获取设备认证信息。已获取C Link SDK...
TargetSubtitle
示例：URI 为 oss:/examplebucket/outputSubtitle，则将产生多个 OSS 地址为 oss:/examplebucket/outputSubitile_${index}.${ext}文件，其中${ext}为字幕文件的拓展名，${index}为生成的从 0 开始编号的与源视频字幕流对应的字幕文件序号。...
工作流活动介绍
本文介绍了媒体工作流拓扑结构中的活动类型及支持参数。当您调用AddMediaWorkflow-新增媒体工作流、UpdateMediaWorkflow-更新媒体工作流的拓扑结构接口填写Topology拓扑结构时可参考此文档进行设置。活动类型 活动名称 拓扑结构中的...
创建工作流
工作流也支持 新增文件手动触发工作流（推荐输入文件为直播录制的M3U8文件使用）、历史文件手动触发工作流，详细说明请参见本文 后续步骤。登录 媒体处理控制台。在顶部菜单栏左侧选择地域。在左侧导航栏，选择 工作流>工作流编排。单击 ...
转码常见问题
确认转码源文件能否在本地正常播放（非常重要），经统计大部分转码失败是因为源文件本身有问题（如：视频流缺失、metadata存在问题、帧错误、视频头部信息缺失等），会触发转码效率监控，导致转码退出。使用 ffprobe-show_streams-show_...
实时计算场景优化
DataXceiver error processing WRITE_BLOCK operation src:/10.*.*.*:35692 dst:/10.*.*.*:50010 java.io.IOException:Premature EOF from inputStream 配置预留磁盘空间 背景：HDFS对于打开的文件写入流，会预先保留128 MB Blocksize的...
产品规格
文件系统实例性能 CPFS支持通过CPFS-POSIX客户端或CPFS-NFS客户端访问文件系统，以下列举了在相同文件系统容量下通过CPFS-POSIX客户端或CPFS-NFS客户端访问文件系统时，200 MB/s/TiB基线、100 MB/s/TiB基线和400 MB/s/TiB基线规格的CPFS...
通过向OSS上传文件触发工作流
本文介绍如何集成阿里云对象存储OSS与阿里云消息服务MNS，通过将数据上传文件至对象存储OSS中，自动触发工作流运行文件，并生成结果。前提条件 已开通以下服务与功能。开启事件驱动功能。具体操作，请参见 开启事件驱动功能。开通 消息服务...
TargetAudio
DisableAudio boolean 是否禁用音频处理，取值范围如下：true：禁用，输出文件中将不包含音频流。false（默认）：不禁用。false Stream array 需要处理的源文件音频流索引号列表。空值（默认）表示处理索引号最小的音频流（第一路音频流）...
媒体处理常见问题
如果转码失败，可能是因为源文件本身问题导致，例如：视频流缺失、metadata存在问题、帧错误、视频头部信息缺失等。通过阅读本文，您可以了解转码异常、转码格式支持及其他常见问题及对应解决方案。转码异常问题 使用SubmitJobs API提交...
表流读写
Delta Lake克服了许多流式处理系统和文件相关的常见限制，例如：合并低延迟引入产生的小文件 保持多个流（或并发批处理作业）执行“仅一次”处理 使用文件作为流源时，可以有效地发现哪些文件是新文件 Delta表作为流源 当您将Delta表加载为...
高温报警
本文以高温报警（传感器温度>80度时，输出报警信息到本地文件中）的场景为例，详细说明如何使用SQL进行流数据分析作业的编写以及流数据分析作业如何运作。流程图如下所示。前提条件 请您确保已创建边缘实例，具体操作请参见 专业版环境搭建...
Flink Python作业快速入门
本文带您快速体验Flink Python流作业和批作业的创建、部署和启动，以了解实时计算Flink版Python作业的操作流程。前提条件 如果您使用RAM用户或RAM角色等身份访问，需要确认已具有Flink控制台相关权限，详情请参见 权限管理。已创建Flink...
OSS下载的RAR文件存在乱码
问题描述 通过OSS下载的RAR格式文件，打开文件后存在乱码。问题原因 Object的文件类型不正确，HTTP头的 Content-Type 参数和实际文件类型参数不匹配。解决方案 修改Object属性中的HTTP表头，将设置中的 Content-Type 值改成 application/x-...
Dataphin管道任务从本地CSV文件读取汉字显示乱码
产品名称 Dataphin 产品模块 数据集成 概述 本文描述管道任务中从本地CSV文件读取汉字乱码的原因及应对方法。问题描述 数据集成CSV(UTF-8)文件导入HIVE，预览时中文出现乱码。问题原因 因为CSV文件格式是UTF-8。解决方案 需要将CSV文件格式...
使用FileZilla连接站点时出现乱码
使用FileZilla连接站点后，可能因为FileZilla默认使用自动检测字符集处理文件，与站点上文件本身的编码格式不一致，导致站点上的文件名称出现乱码。本文介绍这种情况的可能原因和解决方案。问题现象 使用FileZilla连接站点后，站点上的部分...
通过名称中包含中文的文件URL预览或下载文件时出现...
本文介绍通过名称中包含中文的文件URL预览或下载文件时出现乱码的解决方法。例如，通过文件URL将 测试.txt 下载到本地时出现乱码，您需要将名称中包含的中文字符进行URL编码，即按照"attachment;filename="+URLEncoder.encode("测试","UTF-...
触发工作流
媒体处理中工作流的触发方式根据文件路径以及自动触发的设置情况，一共可分为3种触发方式。本文介绍不同工作流触发方式的适用场景和要求。触发方式对比 触发方式 适用场景 自动触发 文件上传到指定路径后立即按固定流程处理 手动 触发...
流式下载
如果要下载的文件太大，或者一次性下载耗时太长，您可以通过流式下载，一次处理部分内容，直到完成文件的下载。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。...
管理数据流动任务
本文介绍如何在文件存储控制台创建、管理CPFS智算版文件系统的数据流动任务及查看任务报告。前提条件 已创建数据流动。具体操作，请参见 创建数据流动。任务说明 数据流动任务可分为导入（Import）和导出（Export）两种类型。类型 说明 ...
OSS文件上传和下载失败的排查方法
OSS的文件更新后部分地区下载的文件仍是旧版本 OSS下载的RAR文件存在乱码 OSS下载的内容与实际内容不一致 更多信息 OSS SDK上传文件主要包括以下几种上传方式，请根据不同上传方式的特性，选择合理的上传方式进行重新配置。简单上传：适用...
低成本跨境文件传输
文件上传OSS，触发函数计算调用 Serverless 工作流，每个工作流负责一个文件的上传，保障文件通过硅谷的OSS加速域名被快速同步。ECS模拟硅谷当地用户读取OSS文件，并校验数据是否正确。方案优势 运维成本低：开发人员关注代码逻辑即可。...
管理数据流动任务
本文介绍如何在文件存储控制台创建、管理CPFS数据流动任务及查看任务报告。前提条件 已创建CPFS Fileset。具体操作，请参见 创建Fileset。已创建数据流动。具体操作，请参见 创建数据流动。任务说明 任务类型 按任务对数据的操作，可分为...
低成本跨境文件传输
文件上传OSS，触发函数计算调用 Serverless 工作流，每个工作流负责一个文件的上传，保障文件通过硅谷的OSS加速域名被快速同步。ECS模拟硅谷当地用户读取OSS文件，并校验数据是否正确。方案优势 运维成本低：开发人员关注代码逻辑即可。...
快速使用工作流
如果需要制作多码率、多音轨、多字幕或多格式等类型视频，或希望预先编排好一系列任务流程，然后按照编排好的环节和条件依次执行任务，您可以创建工作流并在工作流中设置转码、分析、截图、打包（封装）、审核、提取视频DNA、设置智能封面...
工作流常见问题
创建媒体工作流时需要指定该工作流的输入文件路径，当该路径下有下列后缀名的音视频文件上传完成时，服务将自动触发该媒体工作流，对此输入文件执行媒体工作流中设定的各项操作。文件后缀名为在以下范围内的文件支持自动触发工作流执行：...
SDK示例
本文列出了使用Java代码通过Hadoop FileSystem API对 文件存储 HDFS 版 文件系统进行常用操作的示例，您可以参考这些示例代码开发您的应用。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储...
计费项
当您使用CPFS存储文件时，CPFS会根据您存储的类型、大小、时长收取费用。如果您的业务涉及数据流动和协议服务时，CPFS会收取带宽费用。说明 本文仅说明相关计费项及付费方式。有关CPFS计费项的定价详情，请参见 CPFS产品定价。CPFS计费项 ...
配置通用埋点
针对下载的 mtracker 埋点 JS 文件中文出现乱码的情况，正常使用该 JS 文件即可，不会影响埋点配置。该中文乱码问题应该是因文件编码格式与浏览器解释的编码格式不同所导致。初始化配置。根据不同场景，在 H5 埋点 JS 文件中注入相应的信息...
- 产品推荐
- 这些文档可能帮助您