产品概述
支持通过API向服务端发送文本，服务端接收到数据后处理成数字人的声音、表情、口型、动作，然后将对应数据通过流媒体技术合成视频流，输出到对应的流媒体渠道，如官方的阿里云RTC，或者客户指定的RTMP流媒体服务器，然后客户可以通过对应的...
国标协议接入流程
认证通过之后，开启摄像头拉流，阿里SIP服务器会发送INVITE国标请求到摄像头，其中携带了阿里流媒体服务器的地址信息。摄像头收到之后回复200。摄像头主动连接阿里流媒体服务器，并开始推送视频流。设备注册成功后启动拉流 启动拉流 国标...
什么是虚拟数字人开放平台
支持通过API向服务端发送文本，服务端接收到数据后处理成数字人的声音、表情、口型、动作，然后将对应数据通过流媒体技术合成视频流，输出到对应的流媒体渠道，如官方的阿里云RTC，或者客户指定的RTMP流媒体服务器，然后客户可以通过对应的...
名词解释
RTMP是一种设计用来进行实时数据通信的网络协议，主要用来在Flash/AIR平台和支持RTMP协议的流媒体/交互服务器之间进行音视频和数据通信。TS TS的全称则是Transport Stream，TS流文件，是一种DVD的文件格式，MPEG2-TS格式的特点就是要求从...
错误码
5009 媒体服务器通过信令通道发出关闭指令。5010 媒体链路断开连接超时。5011 媒体链路连接失败。5012 发布初始化媒体源失败。发布相关错误码 错误码 错误信息 5101 发布启动失败：视频启动失败。5102 发布启动失败：音频启动失败。5103 ...
AddMedia-新增媒体
tag1,tag2 MediaWorkflowId string 否 媒体工作流 ID。可通过 MPS 控制台或 新增媒体工作流 接口获取。07da6c65da7f458997336e0de192*MediaWorkflowUserData string 否 媒体工作流用户自定义数据。不超过 1024 字节。UTF-8 编码。test ...
主调接口
发布媒体流成功：OnPublishSucc(sid)回调参数 类型 说明 sid int 发布媒体流的 ID 发布媒体流失败：OnPublishFailed(sid,err_code,err_msg)回调参数 类型 说明 sid int 流 ID err_code int 发布媒体流失败返回：1071：服务器返回错误-...
提交视频溯源水印m3u8
使用说明 使用本接口前需先调用 提交视频溯源水印ab流 接口，获取到ab流处理后的媒体ID，再调用本接口进行处理。目前数字水印相关接口只支持华东2（上海）地域使用。经过视频溯源水印m3u8作业处理生成的m3u8文件签名鉴权有效期为24小时（从...
HLS标准加密
重要 创建加密工作流时必须传入业务方的Key URI地址，媒体处理加密视频时将该地址写入M3U8文件存储到OSS。Key URI示例：example.aliyundoc.com 。语言 集成SDK 加密工作流代码示例 Java Java SDK安装 创建HLS标准加密工作流 Python Python ...
数据类型
2.1 AliEngineTrascodingPublsihTaskStatus 旁路推流PublishTask状态。2.1 AliEngineChannelRelayEvent 跨频道转发事件。2.1 AliEngineChannelRelayState 跨频道转发状态。2.1 AliEngineChannelRelayErrorCode 跨频道转发错误码。2.1 ...
File
{"MemberName":"Tim","Enabled":"True","ItemCount":"10"} StreamCount long 媒体容器中媒体流的数量。1 ProgramCount long 媒体容器中节目数量。1 FormatName string 媒体格式名称。mov FormatLongName string 媒体格式名称的全称。...
功能发布记录
2024-02 发布日期 发布...QueryMediaInfoJobList-查询媒体信息作业信息 QueryAnalysisJobList-查询模板分析作业 QueryJobList-查询转码作业 QuerySnapshotJobList-查询截图作业结果 QueryMediaWorkflowExecutionList-查询媒体工作流执行实例 ...
应用管理
说明 若当前对uid=111 和 uid=222两个用户进行混流布局，则SEI的示例信息如下：{"stream":[{"uid":"111","paneid":0,"zorder":1,"x":0,"y":0.25,"w":0.5,"h":0.5,"type":0,"ms":0,"vol":1,"vad":119},{"uid":"222","paneid":1,"zorder":1,...
数据类型
1.1 AliRtcPublishState 推流状态。2.1 AliRtcSubscribeState 订阅状态。2.1 AliRtcUserOfflineReason 用户离线原因。2.1 AliRtcVideoStreamType 相机流类型。2.1 AliRtcAudioTrack 音频流类型。1.1 AliRtcNetworkQuality 网络质量。1.1 ...
实例规格族
trans 视觉计算型实例规格族ebmgi6s GPU计算型实例规格族gn5 GPU计算型实例规格族gn5i 弹性裸金属服务器规格族群 推荐 其他在售（如果售罄，建议使用推荐规格族）GPU计算型弹性裸金属服务器实例规格族ebmgn7ex GPU计算型弹性裸金属服务器...
数据结构
该模式下SDK推竖屏流，始终以设置的分辨率宽和高中较小的值作为输出视频的宽，较大值作为输出视频的高 AliEngineVideoEncoderOrientationModeFixedPortrait 2：横屏模式。该模式下SDK推横屏流，始终以设置的分辨率宽和高中较大的值作为输出...
数据类型
1.1 AliRtcPublishState 推流状态。2.1 AliRtcSubscribeState 订阅状态。2.1 AliRtcUserOfflineReason 用户离线原因。2.1 AliRtcVideoStreamType 相机大小流类型。2.1 AliRtcAudioTrack 音频流类型。1.1 AliRTCCameraType 摄像头方向。1.1 ...
数据结构
AliRtcVideoTrack 视频流类型。AliRtcPublishState 推流状态。AliRtcSubscribeState 订阅状态。AliRtcUserOfflineReason 用户离线原因。AliRtcVideoStreamType 相机流类型。AliRtcAudioTrack 音频流类型。AliRtcNetworkQuality 网络质量。...
普通集成
v1 Timeout:600 StartAt:DescribeInstances States:Type:Task Name:DescribeInstances Action:ECS:DescribeInstances TaskMode:RequestComplete Parameters:RegionId:cn-hangzhou VpcId: vpc-bp11y195luy47h8*VSwitchId:vsw-bp1wb297ekw7...
UploadMediaByURL-URL拉取上传
f476988629f54a7b8a4ba90d1a6c7*示例 正常返回示例 JSON 格式 {"RequestId":"*83B7-7F87-4792-BFE9-63CD2137*","UploadJobs":[{"JobId":"20ce1e05dba64576b96e9683879f0*","SourceURL":"http://example*.mp4","MediaId":"f476988629f54a7b8...
压测流媒体HLS协议
您可通过PTS控制台快速实现流媒体HLS协议压测。本文介绍如何对流媒体HLS协议进行压测。背景信息 流媒体是一种新型的媒体传输技术，是指将一连串的视频、声音、文本、图像等流数据压缩后，经过网上分段发送数据的方式即时传输影音的过程；...
数字人流媒体开发指南
数字人流媒体服务（包括3D数字人流媒体服务和2D数字人流媒体服务）是将数字人在云端渲染出的视频画面通过流媒体的方式输出到客户端，平台目前提供了阿里云RTC流媒体渠道和标准RTMP流媒体渠道两种渠道。播报数字人（对应开放平台的“咨询...
压测流媒体RTMP协议
您可以通过PTS控制台快速实现流媒体RTMP协议压测。本文介绍如何对流媒体RTMP协议进行压测。背景信息 流媒体是一种新型的媒体传输技术，是指将一连串的视频、声音、文本、图像等流数据压缩后，经过网上分段发送数据的方式即时传输影音的过程...
使用OBS推RTS流（基于WHIP协议）
背景信息 WHIP协议（WebRTC-HTTP ingestion protocol）是一个简化的使用HTTP POST请求来推送实时视频流到云端或其他流媒体服务器的网络协议。WHIP是轻量级的，旨在使得通过WebRTC技术捕获的实时视频内容能够被轻松地传输到支持该协议的流...
GetPlayInfo-获取音视频播放地址
5bed88672b1e2520ead228935ed51*Encrypt long 媒体流是否加密流，取值：0：否。1：是。0 Definition string 视频流清晰度定义。取值：FD：流畅。LD：标清。SD：高清。HD：超清 OD：原画。2K：2K。4K：4K。SQ：普通音质。HQ：高音质。AUTO：...
管理通话应用
设置媒体流代理服务器后，音视频流数据将通过该代理服务器进行转发。重要 代理服务器地址错误会导致音视频通话异常，若无必要请勿填写。配置时需分别填入服务器地址和地址对应的出网 IP，请确保输入的地址准确。媒体流代理服务器地址格式为...
新增媒体工作流
如果需要制作多码率、多音轨、多字幕或多格式等类型视频，或希望预先编排好一系列任务流程，然后按照编排好的环节和条件依次执行任务，您可以创建工作流并在工作流中设置转码、分析、截图、打包...} } 相关文档 创建工作流 媒体工作流接口
ListMediaWorkflowExecutions-遍历媒体工作流执行实例
遍历媒体工作流执行实例。接口说明 本接口只返回近 90 天执行实例。QPS 限制 本接口的单用户 QPS 限制为 100 次/秒。超过限制，API 调用会被限流，这可能会影响您的业务，请合理调用。更多信息，请参见 QPS 限制。调试 您可以在OpenAPI ...
GetPlayInfo-获取音视频播放地址
m3u8 HDRType string 媒体流 HDR 类型。取值：HDR HDR10 HLG DolbyVision HDRVivid SDR+HLG BitDepth integer 颜色位深。取值为整数。8 JobType integer 数字水印类型。取值：1：溯源水印。2：版权水印。2 JobExt string 版权水印的自定义...
常见问题诊断
抓包查看是否会收到阿里云侧SIP服务器的INVITE请求，以及其中是否包含的阿里云侧媒体服务器地址和端口；NVR或IPC是否回复给阿里云侧SIP服务器INVITE请求。检查视频接入是否成功。抓包查看NVR或IPC是否有数据发送给阿里云侧媒体服务器地址和...
QueryMediaList-查询媒体列表
1/44100 Index string 音频流序号，标识音频流在整个媒体流中的位置。1 SampleFmt string 采样格式。fltp ChannelLayout string 声道输出样式。stereo Lang string 语言。更多信息，请参见 FFmpeg 语言定义。und Samplerate string 采样率...
术语表
MediaWorkflow Media Workflow 媒体工作流 媒体工作流是生产媒体的工厂。从输入媒体Bucket的多媒体文件开始，执行自定义的处理流程，把处理结果存储到输出媒体Bucket。由MediaWorkflowId唯一标识。Activity Media Workflow Activity 媒体...
QueryMediaInfoJobList-查询媒体信息作业信息
1/1000 Index string 音频流序号，标识音频流在整个媒体流中的位置。1 SampleFmt string 采样格式。fltp ChannelLayout string 声道数。5.1(side)Lang string 语言。更多信息请参见 FFmpeg 语言定义。eng Samplerate string 采样率。48000 ...
DeleteStream-删除媒体流
删除媒体流（视频流，音频流）信息及存储文件。接口说明 使用说明 支持批量删除。QPS 限制 本接口的单用户 QPS 限制为 50 次/秒。超过限制，API 调用会被限流，这可能会影响您的业务，请合理调用。更多信息，请参见 QPS 限制。调试 您可以...
基本概念
下面以流媒体传输协议的视角重点介绍面向流媒体的封装格式：MP4：经典的视频封装格式，移动端（iOS、Android）、PC Web多终端都能良好支持。但MP4的视频文件头太大，结构复杂；如果视频较长（如数小时），则其文件头会过大，影响视频加载...
接收消息通知
定义：{工作流执行ID，活动名称，活动类型，活动状态，错误信息（如有）}"RunId":"8f8aba5a62ab4127ae2add18da20*","Name":"Act-4","Type":"Report","State":"Success",/工作流执行详情对象：JSON对象，定义：{工作流执行ID，媒体工作流ID...
回调接口
5005：流建立连接成功，但房间状态异常 5007：媒体链路连接关闭 5009：媒体服务器通过信令通道发出关闭指令 5010：媒体链路断开连接超时 5011：媒体链路连接失败 5012：发布初始化媒体源失败 sid int 流 ID OnReceiveTextMsg(uid,msg)推送...
QueryMediaWorkflowExecutionList-查询媒体工作流执行...
查询媒体工作流执行实例。接口说明 本接口一次最多查询 10 个媒体工作流执行实例。请确保工作流中使用的管道为开启状态，否则可能会导致工作流无法正常使用（比如：工作流节点显示已失效、工作流状态一直卡在已提交等）。QPS 限制 本接口的...
服务端API接入
关于RTC拉流端SDK接入可参考 实时流媒体服务接入。1.API SDK引入 针对Java应用在pom.xml中引入如下dependency获得虚拟数字人开放平台Java SDK<dependency><groupId>com.aliyun</groupId> <artifactId>avatar20220130</artifactId> <version>$...
基于OSS API上传
当媒体文件为网络文件或需要自动化上传、大批量迁移时，可以通过调用智能媒体服务相关接口获取媒资上传地址和凭证，再调用OSS原生接口完成上传功能。通过阅读本文，您可以了解基于OSS API上传的方法。前提条件 您已经了解支持上传的文件...
- 产品推荐
- 这些文档可能帮助您