智能媒资服务
智能媒资服务(AI Media Hub)基于阿里云人工智能技术来管理和处理媒体资产,对媒资内容进行分类、识别、审核、理解、加工、管理等多维度的处理,从而提高内容的利用、管理和分发效率。智能媒资服务应用于在线视频网站、短视频、广电传媒、在线教育、数字出版等有大规模音视频内容管理和应用需求的场景。

产品优势

覆盖广泛
覆盖音视频资产管理、内容信息编目、内容识别、内容审核、内容分析、内容检索查询等多方面
灵活定制
智能媒资服务支持审核模版定制、标签库自定义等配置,可根据业务需要调整工作流
高效稳定
智能媒资服务支持亿级视频检索库,毫秒级检索效率,95%以上的识别精准度,视频复审率低于10%,大幅提升媒体资源管理分发效率
接入多样
智能媒资服务支持多种部署形态,支持在线调用,提供PaaS和SaaS两种交付方案,可根据业务需求选择适用的部署方案

产品功能

多维度信息识别从视觉、文字、语音、运行行为等多个维度对视频信息进行分析,识别视频中的人物、物体场景、地标、文字、语音等内容。
视觉识别分析视频的视觉图像信息,识别人物、物体、场景等图像内容。
文字识别识别视频图像中的文字,提取图像文本内容。
语音识别分析视频中的语音信息,提取语音文本内容。
运动行为识别分析视频动态信息,识别运动、动作、行为事件等内容。
多模态内容理解采用多模态融合对齐、跨模态映射等技术,对媒体内容进行多模态融合识别,高效、精准理解视频内容。
多模态对齐识别多模态间不同元素的联系和对齐关系,实现视频文字、语音、视觉等不同模态信息的对齐理解。
多模态融合整合不同模态间的模型和特征,提高理解能力和效率,实现语音文字文本纠错能力,提升识别准确率。
多模态联合表征将多模态信息进行整合及联合表征,实现视频内容的一体化识别。
丰富灵活的标签结合成熟完善的媒体标签体系,根据多模态融合理解结果对媒体文件进行智能打标,输出多维度视频标签信息,同时提供灵活的标签自定义功能。
智能标签提取标签处理集成自定义过滤、标签去重、标签合并、权重排序等算法,提供高效、准确、实用的智能打标能力。
多维度标签输出结合融合理解结果及标签体系,输出多维度视频标签,包括视频分类标签、人物标签、物体场景标签、文本标签等。
支持自定义标签支持地标词库注册、人脸自注册、未知人脸聚类、标签黑名单、标签热词等标签自定义功能,满足不同场景下的使用需求。

应用场景

智能标签
智能审核
智能检索
智能封面
智能处理
适用场景
智能媒资服务可用于广电、新媒体、视频网站,短视频应用,资讯平台、电商平台、在线教育等场景
能够提供
准确高效的媒体资源检索
通过准确丰富的视频标签体系,对视频、图像、文本等媒体文件进行内容编目,支持通过关键词或标签文本,对素材库中的内容进行快速检索,提升视频资源检索效率与准确性
精准个性化的内容推荐
根据媒体文件内容标签,结合用户信息、行为数据及用户洞察分析,进行内容精准匹配,实现视频个性化推荐,解决推荐冷启动问题,提升推荐准确率
智能化、场景化的广告投放
根据媒体文件多模态内容分析及视频标签结果,自动识别广告位,与广告资源库内容进行匹配,实现广告智能投放,精准触达受众人群,提升广告转化率
推荐搭配使用
适用场景
智能媒资服务可用于短视频平台、社区论坛、直播平台、视频点播平台、媒资管理平台等
能够提供
精准高效的UGC内容审核
海量UGC上传的视频,通过视频智能审核技术,快速检测违规内容,识别媒体质量问题,有效减少人工审核的工作量
实时准确的直播内容审核
实时监控直播视频流的语音、文字、画面内容,快速响应,控制业务风险。 高效精准的内容审核:高效识别点播视频中的违规镜头,紧跟政策最新动态,严控违规内容
推荐搭配使用
适用场景
智能媒资服务可用于广电、新媒体、视频网站,短视频应用,资讯平台、电商平台、在线教育等场景
能够提供
视频查重
建立独立视频检索库,在该库中对样本视频完成快速比对,实时召回重复视频或重复片段。防止内容分发和个性化推荐时,出现过多相同或相似视频,影响用户体验
原创识别
准确识别是否为原创视频、编辑变换后视频、自媒体再创作视频。解决短视频领域维权问题,为视频素材交易生态提供技术基础,防止侵权视频侵害原创者及视频平台利益
快速审核
通过维护违规视频库或自定义黑库,对增量视频,快速进行DNA比对并判断是否有违规内容。相比传统审核,提高大量视频过审的效率,保障准确性,降低审核的成本
广告分成
通过视频检索技术,检索分成广告库,对特定广告进行监播和识别。有利于支撑广告动态分成业务生态,轻松把控广告投放的时间、次数等,同时保障了广告版权方和投放平台的利益;同时可基于此可以进行广告的高效识别、替换及广告位竞拍
视频溯源
对于新增视频,在庞大的视频检索库中进行快速检索,以定位一个视频的传播路径。有效解决视频溯源、传播路径分析或挖掘媒体资源之间联系的问题
推荐搭配使用
适用场景
智能媒资服务可用于广电、新媒体、视频网站,短视频应用,资讯平台、电商平台、在线教育等场景
能够提供
PGC、UGC视频封面
针对PGC或者UGC内容,使用智能封面服务为海量视频内容自动生成具有代表性的高质量封面图片、封面GIF动图或封面短视频,利用精彩封面展示有效吸引用户,提升视频点击率
视频内容生产、媒体资源管理
辅助进行媒体资源管理、快速浏览视频内容
推荐搭配使用
适用场景
智能媒资服务可用于新闻报道、体育赛事、影视综艺等场景
能够提供
新闻报道
对新闻素材视频进行去字幕、横转竖、视频拆条等处理,方便素材内容的二次加工及剪辑生产,提升视频内容编辑效率,加速移动端内容生成及投放
影视综艺
对影视视频、综艺节目视频进行智能剪辑处理,对原始素材进行字幕擦除、字幕提取、水印去除、智能横转竖,帮助进行内容的个性化生产及宣发投放
体育赛事
针对体育赛事视频中的选手动作、镜头类型、赛事进程进行分析,给出赛事视频中发生动作类型和对应时间区域、转播镜头类型、比分信息等,并在此基础上进行智能端到端体育赛事视频集锦生成
推荐搭配使用

更多产品与服务

视频点播
视频点播是集音视频采集、编辑、上传、媒体资源管理、自动化转码处理(窄带高清™)、视频审核分析、分发加速于一体的一站式音视频点播媒体服务。
智能媒体服务
智能媒体服务涵盖媒体处理、云端智能剪辑、智能媒资服务三大服务板块,是基于阿里云音视频和人工技术,围绕视频直播和视频点播场景下的媒体采集、媒资管理、内容生产制作和分发能力的一站式服务集,为用户提供广播级、全智能、灵活多样的音视频专业能力。
媒体处理
媒体处理是一种多媒体数据处理服务。它以经济、弹性和高可扩展的方式,将多媒体数据转码成适合在全平台播放的格式。并基于海量数据深度学习,对媒体内容、文字、语音、场景进行多模态分析,实现智能审核、内容理解、智能编辑等多种处理功能。

文档与工具