常见问题
本文档根据实践，介绍了本案例中比较常见的两个问题及解决方法。...可能原因：您的RDS数据库与流计算项目不在同一区域。...参考文档：【流数据与大屏DataV】如何使用DTS，DataHub，StreamCompute，RDS及DataV搭建流数据大屏。
数据分析整体趋势
大数据与数据库一体化：早期大数据技术以牺牲一定程度一致性为基础提供分布式能力，解决了传统单机数据库的扩展性不足问题，在MapReduce基础上提供了标准SQL接口，架构上也逐步采用了部分MPP数据库技术；另一方面，分布式数据库也快速发展...
什么是MaxCompute
提供持续的SaaS化云上数据保护 为云上企业提供基础设施、数据中心、网络、供电、平台安全能力、用户权限管理、隐私保护等保三级超20项安全功能，兼具开源大数据与托管数据库的安全能力。产品架构 MaxCompute的产品架构如下。其中核心模块...
GetPlayInfo-获取音视频播放地址
调用GetPlayInfo通过音视频ID直接获取媒体文件（支持视频和音频）的播放地址。接口说明 通过音视频 ID 来获取音视频的播放地址。通过集成阿里云播放器 SDK（适用于 URL 播放方式）或第三方播放器后，可使用获取到的播放地址用于音视频的...
Paimon概述
支持在流模式与批模式下读写大规模数据集。支持分钟级到秒级数据新鲜度的批查询和OLAP查询。支持消费与产生增量数据，可作为传统数仓与流式数仓的各级存储。支持预聚合数据，降低存储成本与下游计算压力。支持历史版本回溯。支持高效的数据...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
快速体验
大数据存储与计算：云原生大数据计算服务 MaxCompute（必选）、实时数仓Hologres（可选）、开源大数据平台E-MapReduce（可选），您可根据需要开通MaxCompute、Hologres或E-MapReduce。数据开发与调度：大数据开发治理平台 DataWorks数据...
什么是云数据库HBase
云原生多模数据库Lindorm）、全文检索（参见Lindorm产品）等能力，结合完备的工具服务，丰富的生态融合，一站式高效满足企业在大数据量场景下的存储、检索、分析需求，是风控、推荐、广告、物联网、车联网、Feeds流、数据大屏等场景的数据...
相关的云服务
DataWorks作为阿里云一站式大数据开发与治理平台，通常会与计算引擎产品联合使用，此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下，使用DataWorks时通常会使用到的其他云产品。计算...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
产品简介
DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如...
ClickHouse数据源
ClickHouse数据源为您提供读取和写入ClickHouse...否 无 batchSize 一次性批量提交的记录数大小，该值可以极大减少数据同步系统与ClickHouse的网络交互次数，并提升整体吞吐量。如果该值设置过大，会导致数据同步运行进程OOM异常。否 1,024
产品概述
支持通过API向服务端发送文本，服务端接收到数据后处理成数字人的声音、表情、口型、动作，然后将对应数据通过流媒体技术合成视频流，输出到对应的流媒体渠道，如官方的阿里云RTC，或者客户指定的RTMP流媒体服务器，然后客户可以通过对应的...
直播延迟
将流媒体数据切成连续的TS分片，每个分片有5秒以上的时长，分片数量一般为3~4个，所以总延迟约10秒~30秒，但流畅性较好。主要应用于iOS设备，提供音视频直播服务和录制内容等服务。HTTP M3U8、TS 跨终端 RTMP 由Adobe公司推出，传输的过程...
如何降低延时？
将流媒体数据切成连续的TS分片，每个分片有5秒以上的时长，分片数量一般为3~4个，所以总延迟约10秒~30秒，但流畅性较好。主要应用于iOS设备，提供音视频直播服务和录制内容等服务。HTTP M3U8、TS 跨终端 RTMP 由Adobe公司推出，传输的过程...
开通消息引擎
在 选择数据引擎 部分，按需选择 流数据节点规格 与 流数据节点数量。创建实例后开通消息引擎 在 实例列表 点击对应实例，进入 实例详情 页面，在左侧菜单选择 流引擎 标签页，点击 立即开通 按钮。在购买页面按需选择 流数据节点规格 与 ...
新旧版本使用指引
UpdateDataset-更新数据集 UpdateSet-更新媒体集的显示名称 GetDataset-查询数据集信息 GetSet-获取媒体集信息 ListDatasets-列出数据集 ListSets-获取媒体集列表 DeleteDataset-删除数据集 DeleteSet-删除媒体集 元数据索引 IndexFileMeta...
客户案例
视频介绍 社交媒体行业：欢聚时代大规模数据湖建设 客户简介 欢聚时代成立于2005年，是全球领先的社交媒体企业，旗下运营多款社交娱乐产品，包括即时通讯、电商业务等。目前基于Hadoop+HDFS开源架构进行离线（HDFS+Spark）、实时计算...
普通集成
企业服务 大数据搜索与分析 日志服务 大数据计算 云原生大数据计算服务 大数据（数加）Data Lake Analytics Databricks数据洞察 Elasticsearch Elasticsearch Serverless服务 Quick BI 实时数仓 Hologres 数据湖构建 存储服务 网盘与相册...
基本概念
Metadata 对媒体数据（比如视频帧）引用说明，而媒体数据在这些引用文件中的排列关系全部在第一个主文件中的metadata描述，这样就会导致视频时长越大文件头就会越大、加载越慢。HLS（HTTP Live Streaming）：苹果公司推出的基于HTTP的流...
E-MapReduce弹性低成本离线大数据分析
Spark采用了内存计算，允许数据载入内存作反复查询，融合数据仓库、流处理和图形计算等多种计算范式，能够与Hadoop很好地结合。Storm适用于处理高速、大型数据流的分布式实时计算，为Hadoop添加可靠的实时数据处理能力。海量离线数据分析...
存储类型
云原生多模数据库 Lindorm依赖于LindormDFS云原生存储系统，实现了数据存储与计算分离。存储容量独立计费，支持不停机在线扩容。Lindorm实例的存储容量在同实例内的多个引擎之间共享。存储类型说明 云原生多模数据库Lindorm支持的存储类型...
创建实例
适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业，进行海量数据存储和离线计算的业务场景。说明 若商品类型选择 Lindorm轻量版，则不支持此功能。选择数据引擎 包括宽表引擎、时序引擎、搜索引擎、文件引擎和流引擎。您可以...
包年包月
本文介绍使用流数据服务Confluent包年包月模式下的注意事项。包年包月计费是一种需要先付费才能使用资源的计费方式，主要适用于长时间稳定的业务运行场景。您需要根据实际业务量分析资源的使用需求，一次性支付一个月或者多个月的费用。...
创建项目
重要 为了减少跨网络的时延和成本，项目只能处理相同地域的OSS中的数据，地域请选择为与您需要处理的OSS数据相同的地域。项目创建后不支持更换地域。在 项目列表 页面，单击 创建项目，弹出 创建项目 面板，如下图所示。在 创建项目 面板，...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
UpdateDataset-更新数据集
更多信息，请参见 工作流模板与算子。Official:AllFunction DatasetMaxBindCount long 否 每个数据集绑定的最大个数。取值范围为 1~10。10 DatasetMaxFileCount long 否 每个数据集中文件的最大个数。取值范围为 1~100000000。100000000 ...
CreateDataset-创建数据集
创建数据集后，您可以通过 IndexFileMeta 建立文件元信息索引，实现多元化的 数据检索与统计 和 智能管理。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。...
媒体处理常见问题
使用 ffprobe-show_packets-i[filePath]命令查看数据码流是否有问题，码流时长与metadata时长是否一致。说明 metadata中的时长与实际持续的码流时长不一致可能导致转码失败，对于metadata有问题的文件，建议您先本地使用ffmpeg工具处理，再...
操作指南概述
阿里云媒体处理MPS（ApsaraVideo Media Processing，原MTS）以经济、弹性和高可扩展的转换方法，将多媒体数据转码成适合在全平台播放的格式，并基于海量数据对媒体的内容进行多模态分析，实现智能审核、智能生产、版权保护等功能。...
数据类型
本文介绍智能媒体服务媒资库相关数据类型。MediaInfo 媒资内容信息 字段名 类型 描述 MediaId String 媒资ID，全局唯一。MediaBasicInfo MediaBasicInfo 媒资基础信息，包含标题、描述等。FileInfoList FileInfo[]媒资文件信息，一个媒资...
基本概念
元数据 智能媒体管理提供的元数据管理功能可以帮助用户对存储在对象存储（OSS）、相册与网盘服务（PDS）等产品中的文件的元数据进行采集、分析、查询等。元数据管理支持的文件元数据包括：文件大小、文件格式、创建时间等文件的基础信息。...
阿里云流播放器
图表样式 阿里云流播放器是媒体组件的一种，支持自定义视频的URL地址，能够在可视化应用中添加视频播放器来播放您的视频。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中输入您需要搜索的配置项名称，快速定位...
SubmitMediaInfoJob-提交媒体信息作业
提交媒体信息作业。调用本接口之后媒体处理MPS会对输入文件进行媒体信息分析，返回输入文件的媒体信息。接口说明 请确认文件已成功上传至 OSS 后再提交媒体信息作业，否则会导致执行失败。您可通过 配置 OSS 回调消息确认文件上传状态。...
API概览
DeletePlayInfo 删除媒体流 调用DeletePlayInfo删除媒体流（视频流，音频流）信息。媒资审核 API 标题 API概述 CreateAudit 人工审核 调用CreateAudit针对媒资提交人工审核。SubmitMediaCensorJob 提交媒体审核作业 调用...
引擎简介
云原生多模数据库 Lindorm 流引擎面向实时数据处理场景，支持使用标准的SQL及熟悉的数据库概念完成一站式的实时数据处理，适用于车联网、物联网和互联网中常见的ETL、实时异常检测和实时报表统计等场景。本文介绍Lindorm流引擎的应用场景和...
阿里云流播放器
图表样式 阿里云流播放器是媒体组件的一种，支持自定义视频的URL地址，能够在可视化应用中添加视频播放器来播放您的视频。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入您需要搜索的配置项名称，快速...
媒体转码
媒体转码是为多媒体数据提供的媒体处理服务。它以经济、易用、弹性和高可扩展的音视频转换方法，帮助您将存储于OSS的音视频转码成适合在PC、TV以及移动终端上播放的格式。功能简介 功能包括：视频转码、视频转封装、视频转HLS、视频转动图...
- 产品推荐
- 这些文档可能帮助您