加工原理
日志服务提供的数据加工功能，通过编排内置的两百多个函数，使用协同消费组对日志数据进行消费，实现对日志数据的加工处理。本文档主要介绍进行数据加工时日志数据的调度原理，以及加工规则引擎的工作原理。调度原理 日志服务的数据加工...
云数据库 Memcache 版 SDK for NodeJS 介绍
Express 框架内建了对 session 处理的支持，它默认的 session 存储机制是内存存储，而将其他 session 存储机制作为可扩展选项。如下代码所示：/创建一个 express 实例 var app=require(“express“);内存存储 session var session=require...
TSDB for InfluxDB®️与自建InfluxDB对比优势
另外，很难处理ECS故障导致的服务终止。根据规格和场景提供最优的参数配置，提供完善的进程恢复机制以及全自动的ECS故障转移机制。另外，具备比开源版本InfluxDB更完善的内存管理机制，实现了全自动Load Shedding，从容应对瞬时冲击。具有...
消费者负载均衡
重要 队列粒度负载均衡策略保证同一个队列仅被一个消费者处理，该策略的实现依赖消费者和服务端的信息协商机制，云消息队列 RocketMQ 版 并不能保证协商结果完全强一致。因此，在消费者数量、队列数量发生变化时，可能会出现短暂的队列分配...
基于Hadoop集群支持Delta Lake或Hudi存储机制
Delta Lake和Hudi是数据湖方案中常用的存储机制，为数据湖提供流处理、批处理能力。MaxCompute基于开源的Hadoop集群提供了支持Delta或Hudi存储机制的湖仓一体架构。您可以通过MaxCompute查询到实时数据，即时洞察业务数据变化。背景信息 ...
2021年
2021-09-01 华东1（杭州）华东2（上海）华北2（北京）华南1（深圳）华北3（张家口）新加坡 无 MaxCompute 支持通过湖仓一体方式读取OSS上的Hudi或 Delta Lake格式存储 Delta Lake和Hudi是数据湖方案中常用的存储机制，为数据湖提供流处理、...
移动网关简介
实行统一的安全加密机制和防篡改的请求签名验证机制。限流管控，保护后台服务器。价值优势 移动网关服务的优势在于：简单配置即可适配多种终端，连接异构的后端服务。自动生成移动端 SDK，实现前后端分离，提升开发效率。支持服务注册、...
产品优势
易用的媒体工作流 自定义媒体工作流，文件上传完毕自动触发执行媒体工作流转码，消息机制实时状态更新，1分钟搭建常见视频处理流程。需要自己研发转码相关接口和通知机制。智能审核 优势 阿里云媒体处理 大幅降低运营成本 平均复审率低于10...
设计方案
整体稳定性设计方案可参考如下：架构设计原则 软件系统从所有的功能都在一个应用程序内运行的单体应用架构，到不同的功能模块分别部署在不同的服务器上的传统分布式应用架构，再到服务细分通过轻量级的通信机制进行互相调用的微服务架构，...
产品优势
同时我们还提供插件机制，方便用户定制自己的业务处理逻辑。SQL查询 问天引擎支持SQL查询语法，支持多表在线join，提供丰富的内置UDF函数和UDF函数定制机制，以满足不同用户的检索需求。在运维系统中我们即将集成SQL studio，方便用户进行...
召回引擎版介绍
同时我们还提供插件机制，方便用户定制自己的业务处理逻辑。SQL查询 OpenSearch-召回引擎版支持SQL查询语法，支持多表在线join，提供丰富的内置UDF函数和UDF函数定制机制，以满足不同用户的检索需求。在运维系统中我们即将集成SQL studio，...
使用ASM回退机制
当某个微服务发生故障或无法使用时，回退机制会调用一个备用的服务来处理请求，以确保整个系统的稳定性和可用性。例如，当一个服务端点不可用时，可以使用回退机制将请求转发到一个备用的服务版本，确保客户端请求能够继续正常运行，而不会...
使用ASM回退机制
当某个微服务发生故障或无法使用时，回退机制会调用一个备用的服务来处理请求，以确保整个系统的稳定性和可用性。例如，当一个服务端点不可用时，可以使用回退机制将请求转发到一个备用的服务版本，确保客户端请求能够继续正常运行，而不会...
队列服务订阅推送
在订阅推送可以持续地将就绪的数据立即推送到客户端手中，避免通过Get API进行轮询造成的时延和通过队列服务的内部机制进行查询，可以最大程度地降低处理时延和队列服务的负载。但是在使用上，由于有较多额外的概念，订阅推送具有一定的...
媒体处理
阿里云媒体处理（ApsaraVideo Media Processing，原MTS）是一种多媒体数据处理服务。它以经济、弹性和高可扩展的转换方法，将多媒体数据转码成适合在全平台播放的格式。并基于海量数据深度学习，对媒体的内容、文字、语音、场景多模态分析...
自然语言处理
自然语言处理（Natural Language Processing，简称NLP），是为各类企业及开发者提供的用于文本分析及挖掘的核心工具，已经在客服、资讯、金融、司法、医疗等场景有广泛的应用。
Confluent流处理平台
Confluent Platform 是一个全面的数据流企业级平台，使您能够以连续、实时的流形式轻松访问、存储和管理数据。...这些功能旨在帮助加快应用程序开发和连接，通过流处理实现转换，简化大规模企业操作，并满足严格的体系结构要求。
应用场景
EMR Serverless Spark不仅集成了任务调度系统，使得您能够便捷地构建与管理数据ETL流程，轻松实现自动化及周期性数据处理，而且还内置了先进的版本控制机制。这一机制确保了开发与生产环境的彻底隔离，确保符合企业级用户在研发和发布流程...
开源对比
无法跳过有问题消息的消费处理，无法处理新生产的消息，从而会导致消息大量堆积引起内存问题，导致消息服务宕机。用户名、密码 通过阿里云访问控制（RAM）的AccessKey和AccessKey Secret生成用户名和密码，详情请参见 静态用户名密码管理。...
机器翻译
依托领先的自然语言处理技术和海量的互联网数据优势，阿里巴巴成功上线基于注意力机制的深层神经网络翻译系统（NMT），帮助用户跨越语言鸿沟，畅享交流和获取信息，实现无障碍沟通。凭借海量数据积累及关键技术创新，在电商领域翻译质量独...
构建基于CloudFlow的弹性高可用音视频处理系统
在音视频系统中，音视频转码是比较消耗计算力的一个子系统，您可以通过 函数计算 和 云工作流 构建弹性高可用的Serverless音视频处理系统。本文会从工程效率、运维、性能和成本方面介绍Serverless音视频处理系统和传统方案的差异。同时介绍...
消息存储和清理机制
本文为您介绍 云消息队列 RocketMQ 版 中消息的存储机制，包括消息的存储粒度、判断依据及后续处理策略等。背景信息 参考 云消息队列 RocketMQ 版 中 队列 的定义，消息按照达到服务器的先后顺序被存储到队列中，理论上每个队列都支持无限...
标注模板说明
iTAG官方模板提供了多种RLHF模板，如多模态RLHF标注、对话排序、对话改写、图生文模板，您可以基于系统提供的这些模板修改为符合自己业务需求的模板，然后再创建对应的标注任务并进行处理，从而提高您的模型训练效果。进入智能标注 iTAG-...
应用场景
数据ETL处理 函数计算支持丰富的事件源，通过事件触发机制，可以用几行代码和简单的配置对数据进行实时处理。例如：对OSS压缩包进行解压、对日志或者数据库中的数据进行清洗、对MNS消息进行自定义消费等。配置简单：支持丰富的事件源类型，...
应用场景
数据ETL处理 函数计算 支持丰富的事件源，通过事件触发机制，可以用几行代码和简单的配置对数据进行实时处理。例如：对OSS压缩包进行解压、对日志或者数据库中的数据进行清洗、对MNS消息进行自定义消费等。配置简单：支持丰富的事件源类型...
API概览
术语表 术语 全称 中文 说明 app application 应用 一个应用即一个完整的搜索服务 错误码 API 描述 错误码说明 返回错误码说明 公共调用方式 API 描述 v3 API 签名机制 详细说明验签过程 应用操作接口 API 描述 数据处理 上传、修改、删除...
新手指引
本文介绍从开通媒体处理服务到使用媒体处理提交任务的全流程，便于您快速上手使用媒体处理服务。快速使用媒体处理 前提条件 注册阿里云账号并完成账号实名认证。详细操作请参见 注册阿里云账号。步骤一、开通服务 开通媒体处理服务，详细...
数据预处理
对于文本数据而言，通常文本数据里面会含有很多跟任务无关的噪音，这时应该进行文本的预处理。在NLP自学习平台内置了一些预处理规则，如果您觉得有必要进行预处理，可以选择这些规则。我们内置的规则包括：去除 URL 链接；去除 emoji 表情...
创建倍速转码任务
使用倍速管道，将视频源切分为多个较小的片段后并行转码，可将转码速度提升5~30倍，显著缩短处理耗时。适用于对首发、时效性要求较高的资讯、赛事、重要内容场景。本文为您介绍倍速转码原理及使用方式。背景信息 媒体处理提供离线转码服务...
计费概述
本文介绍媒体处理的计费组成、计费方式、计费周期，以及媒体处理关联产品费用。计费项 媒体处理详细计费分为 音视频转码费用、音视频增强费用 和 视频AI费用，计费组成如下图，详细说明请参见 计费项。计费方式 媒体处理产品提供两种计费...
什么是媒体处理
媒体处理MPS（ApsaraVideo Media Processing，原MTS）是一种多媒体数据处理服务。以经济、弹性和高可扩展的转换方法，将多媒体数据转码成适合在全平台播放的格式，并基于海量数据对媒体的内容添加智能标签，实现智能审核、智能生产、版权...
欠费说明
本文为您介绍使用媒体处理服务过程中欠费的原因、欠费处理策略及如何查看欠费金额。欠费原因 以下情况媒体处理服务会产生欠费：场景 欠费原因 您 未购买 媒体处理资源包 当您的阿里云账号的可用额度（包含阿里云账户余额、代金券、优惠券等...
媒体处理常见问题
媒体处理中的音频编解码配置类型中支持以下五种Profile：aac_low aac_he aac_he_v2 aac_ld aac_eld 格式支持 媒体处理支持的输入格式 容器格式 3GP、AVI、FLV、MP4、M3U8、MPG、ASF、WMV、MKV、MOV、TS、WebM等。视频编码格式 H.264/AVC、H...
快速入门
自然语言处理NLP快速入门教程 如果您是首次使用自然语言处理NLP的相关服务，您可以参考以下的快速入门文档，以便帮助您更快的了解我们的产品功能。NLP自然语言处理 NLP自然语言处理快速入门 NLP自学习平台 快速入门导览 企业智能搜索 智能...
视频AI费用
可单击展开查看具体价格 处理类型 计费项 单价 单位 音频类处理 副歌检测 0.1 元/分钟 节奏检测 0.1 智能混音 0.1 音质检测 0.05 智能降噪 0.03 声伴分离 0.1 视频类处理 智能封面 0.04 元/分钟 视频摘要 0.05 字幕提取 0.1 字幕擦除 0.4 ...
事件驱动概述
事件处理 Knative Eventing内部通过Broker/Trigger模型实现事件的订阅、过滤和路由机制。事件可以通过Knative管理的Serverless服务进行直接消费处理。事件消费场景 ACR镜像更新自动发布服务。代码提交自动构建镜像。AI音视频处理、定时任务...
工作流概述
工作流指媒体处理中的云端自动化处理工作流，音视频上传完毕后自动执行处理流程。本文介绍工作流的基本概念及使用方式。功能概览 基本概念 基本概念 说明 媒体工作流（MediaWorkflow）工作流是预先编排好的一系列任务流程，可以实现在指定...
开通服务
开通媒体处理服务前，您需要先进行实名认证。完成认证后，进入媒体处理控制台进行相关的授权操作。请您按照以下步骤完成开通MPS服务。前提条件 您已经注册了阿里云账号并完成账号实名认证。注册地址请参见 阿里云官网。注册指引请参见 注册...
事件驱动概述
事件处理 Knative Eventing内部通过Broker/Trigger模型实现事件的订阅、过滤和路由机制。事件可以通过Knative管理的Serverless服务进行直接消费处理。事件消费场景 ACR镜像更新自动发布服务。代码提交自动构建镜像。AI音视频处理、定时任务...
应用场景
媒体处理可以将多媒体数据转码成适合在全平台播放的格式，并基于海量数据对媒体的内容进行审核、添加标签、版权保护等，广泛应用于视频网站、在线教育、电视传媒和泛娱乐视频等各类视频处理场景。本文为您介绍媒体处理服务常见的应用场景。...
- 产品推荐
- 这些文档可能帮助您