使用ResourceQueue（资源队列）进行负载管理-使用ResourceQueue（资源队列）进行负载管理文档介绍内容-阿里云

资源组管理

关于资源队列的更多介绍，请参见使用Resource Queue（资源队列）进行负载管理。在使用资源组进行资源管理时，可以为资源组绑定一个或多个数据库账号，并针对每个资源组单独设置其特定的CPU、内存和并发限制等，来管理各个资源组绑定账号...

调度概述

ACK Scheduler是ACK基于Kubernetes Scheduling Framework扩展机制，针对不同任务负载、不同弹性资源的统一调度系统。ACK Scheduler支持不同弹性资源的混合调度、异构资源的精细化调度、批量计算的任务调度等，提升应用的性能和集群整体资源...

AI负载调度

本文介绍弹性资源调度、AI任务调度、异构资源调度和任务队列调度，帮助用户提升集群的资源利用率和作业运行效率。弹性调度 ACK为不同弹性资源提供了混合调度的能力。功能描述参考文档弹性调度阿里云提供了不同种类的弹性资源，如ECS和...

管理资源队列

如果您有资源隔离和管理的需求，可以通过添加资源队列的方式实现。本文为您介绍如何添加、修改和删除资源队列。使用场景及方式适用于有资源隔离和管理需求的场景。配置资源队列可以避免某个任务或用户占用过多的资源，降低因其他任务或...

队列（MessageQueue）

队列的主要作用如下：存储顺序性队列天然具备顺序性，即消息按照进入队列的顺序写入存储，同一队列间的消息天然存在顺序关系，队列头部为最早写入的消息，队列尾部为最新写入的消息。消息在队列中的位置和消息之间的顺序通过位点（Offset...

消费者负载均衡

根据消费者类型的不同，消费者负载均衡策略分为以下两种模式：消息粒度负载均衡：PushConsumer和SimpleConsumer默认负载策略队列粒度负载均衡：PullConsumer默认负载策略消息粒度负载均衡使用范围对于PushConsumer和SimpleConsumer类型...

YARN调度器

如果配置了队列优先级，同一层级的队列首先将分为两组，保障组（已使用资源小于等于保障资源）与超用组（已使用资源大于保障资源），调度时优先为保障组分配资源，两组内部的所有队列再按优先级从大到小、保障资源使用比例从小到大进行排序...

ack-kube-queue

ack-kube-queue是云原生AI套件提供的任务队列组件，主要围绕着Kube Queue任务队列，结合调度器和Quota系统，提供队列管理、优先级调度、使用弹性配额等功能，帮助您优化Kubernetes中的AI/ML工作负载和批处理工作负载的管理效率和调度性能。...

编辑资源队列

资源队列用于管理和调度集群资源，旨在实现资源的灵活分配和优化。通过阿里云EMR控制台，您可以方便地管理资源队列，并关联不同的分区。前提条件已创建集群，且集群状态为运行中。创建集群详情，请参见创建集群。使用限制 YARN调度器需...

消费者分组（ConsumerGroup）

本文介绍云消息队列 RocketMQ 版中消费者分组（ConsumerGroup）的定义、模型关系、内部属性、行为约束、版本兼容性及使用建议。定义消费者分组是云消息队列 RocketMQ 版系统中承载多个消费行为一致的消费者的负载均衡分组。和消费者...

消费者（Consumer）

本文介绍云消息队列 RocketMQ 版中消费者（Consumer）的定义、模型关系、内部属性、行为约束、版本兼容性及使用建议。定义消费者是云消息队列 RocketMQ 版中用来接收并处理消息的运行实体。消费者通常被集成在业务系统中，从云消息...

主题（Topic）

本文介绍云消息队列 RocketMQ 版中主题（Topic）的定义、模型关系、内部属性、行为约束、版本兼容性及使用建议。定义主题是云消息队列 RocketMQ 版中消息传输和存储的顶层容器，用于标识同一类业务逻辑的消息。主题的作用主要如下：...

基本概念

本文介绍云消息队列 RocketMQ 版的基本概念，以便您更好地理解和使用云消息队列 RocketMQ 版。主题（Topic）云消息队列 RocketMQ 版中消息传输和存储的顶层容器，用于标识同一类业务逻辑的消息。主题通过TopicName来做唯一标识和区分。...

配额与限制

云消息队列 RocketMQ 版对实例的资源配额、实例规格和相关参数进行了约束和规范，您在使用云消息队列 RocketMQ 版时不要超过对应的限制值，避免应用出现异常。参数限制以下参数中各资源的命名及备注等限制值不支持调整，请严格按照规范...

产品优势

云消息队列 Kafka 版 100%兼容开源，支持0.10.x~2.6.x的开源版本，无需代码改造无缝迁移上云，体验全托管、免运维的分布式消息队列服务。开箱即用云消息队列 Kafka 版 100%兼容开源，使您无缝迁移上云。兼容开源：云消息队列 Kafka 版 100...

查看实例风险

云消息队列 Kafka 版实例的实时诊断功能能够定期对实例进行检测，支持查看诊断发现的问题、提供修复建议，并将异常的检查项上报告警给相关联系人。实现方案报警通知说明仅紧急且不健康的报警会发送报警通知。如果未添加报警联系人，则...

什么是云消息队列 Confluent 版？

本文介绍云消息队列 Confluent 版的定义。什么是Confluent Platform Confluent Platform是一个全面的数据流企业级平台，使您能够以连续、实时的流形式轻松访问、存储和管理数据。Confluent由Apache Kafka的原始创建者构建，通过企业级...

使用Spring Cloud框架收发消息

Spring Cloud是用于构建消息驱动的微服务应用程序的框架，提供服务发现、配置管理、消息传递、负载均衡等微服务相关的解决方案，可以更容易地构建分布式系统和进行服务间通信。本文介绍如何使用Spring Cloud框架接入云消息队列 Kafka 版 ...

基本概念

本文说明云消息队列 Kafka 版涉及的专有名词和术语，帮助您更好地理解相关概念并使用该产品。Apache Kafka 一款开源的分布式数据流处理平台，可以实时发布、订阅、存储和处理数据流。更多信息，请参见 Apache Kafka。云消息队列 Kafka 版...

退款说明

根据计费方式的特点，云消息队列 Kafka 版资源支持的退款情况如下：包年包月的云消息队列 Kafka 版资源如需退款，可在控制台上退订实例。详细信息，请参见实例生命周期管理。按量计费的云消息队列 Kafka 版资源在使用后才支付费用，...

操作指南

您可以在云消息队列 Kafka 版控制台创建实例、...云消息队列 Kafka 版 V3系列Serverless实例管理 V2系列实例管理 Topic Group Connector生态集成迁移权限管理云消息队列 Confluent 版集群资源规格评估实例管理权限管理集群配置与使用

开通服务并授权

如果您的账号为RAM用户，必须先为RAM用户进行授权，才能通过控制台或API访问相应的云消息队列 MQTT 版资源，并使用SDK收发消息。前提条件您已注册阿里云账号并完成实名认证。更多信息，请参见注册阿里云账号。步骤一：开通消息队列服务...

计费FAQ

本文汇总了云消息队列 RabbitMQ 版计费的常见问题。向10个Queue发送同一条消息，为什么收10次API调用费？将1条消息发送给10个Queue，实际上是10次API调用。为什么删除的Vhost、Exchange、Queue会被自动重建并重新开始计费？虽然删除了...

计费FAQ

本文汇总了云消息队列 RabbitMQ 版计费的常见问题。向10个Queue发送同一条消息，为什么收10次API调用费？将1条消息发送给10个Queue，实际上是10次API调用。为什么删除的Vhost、Exchange、Queue会被自动重建并重新开始计费？虽然删除了...

CreateConsumerGroup-创建消费者分组

消费者分组是云消息队列 RocketMQ 版系统中承载多个消费行为一致的消费者的负载均衡分组。消费者需要通过指定消费者分组订阅相关的主题来实现消息订阅。接口说明注意阿里云提供的 OpenAPI 属于管控类 API，用于管理和查询阿里云服务的...

标签管理

标签可以识别资源，您可以将作用相同的云消息队列 RocketMQ 版的资源通过标签进行归类，便于搜索和资源聚合。云消息队列 RocketMQ 版支持为实例、Topic和Group添加标签，并支持修改和删除标签。本文介绍标签的应用场景、使用说明、使用...

管理NLB配额

管理NLB配额指查询配额及配额用量、申请提升配额、设置配额使用告警等操作。本文介绍网络型负载均衡NLB（Network Load Balancer）通过几种途径查看配额、提升配额、创建配额告警等相关操作。背景信息阿里云配额中心是阿里云提供的用于集中...

设置全局YARN资源队列

在DataWorks中，您可通过如下方式配置调度节点运行时使用的YARN资源队列：方式一：配置全局YARN资源队列设置工作空间级别某DataWorks功能模块运行EMR任务时使用哪个YARN资源队列，并定义此处配置的 YARN资源队列优先级是否高于指定模块...

Topic使用变更

变更说明由于V3.x.x版本的云消息队列 MQTT 版实现了自身的消息存储，因此所有的云消息队列 MQTT 版 Topic资源都需要在云消息队列 MQTT 版控制台或调用其OpenAPI进行管理。云消息队列 MQTT 版的Topic资源不再和云消息队列 RocketMQ ...

自由使用Group

注意事项在生产环境，长期开启自由使用Group的功能，可能会由于客户端使用不当出现资源随意使用，导致运维成本增加，并且极易造成系统不稳定，建议您通过云消息队列 Kafka 版控制台或者调用OpenAPI手动创建Group，进行统一管理。...

产品架构

Zookeeper 管理集群的配置、选举leader分区，并且在 Group 发生变化时，进行负载均衡。云消息队列 Kafka 版的发布/订阅模型如云消息队列 Kafka 版的发布/订阅模型所示，云消息队列 Kafka 版采用发布/订阅模型。图 2.云消息队列 Kafka ...

配置CLB访问日志

在使用CLB的七层负载均衡（HTTP/HTTPS监听）期间，如果您需要通过负载均衡日志进行业务开发测试、故障处理、客户端用户行为数据分析等，您可使用CLB访问日志功能分析负载均衡日志。CLB结合阿里云日志服务提供的访问日志功能，可帮助您大幅...

集群资源规格评估

对于云消息队列 Confluent 版集群来说，影响资源使用的因素众多，包括使用的业务场景、业务应用程序性能等，本文结合一般场景给出云消息队列 Confluent 版集群资源评估参考建议，帮助您在购买创建集群时评估集群规模。在集群创建完成后...

使用限制

本文为您介绍云消息队列 MQTT 版对某些具体指标的约束和规范，您在使用云消息队列 MQTT 版时请不要超过相应的限制值，以免程序出现异常。具体的限制项和限制值请参见下表。如果您购买了铂金版的云消息队列 MQTT 版实例，则可按需定制...

负载均衡调度算法介绍

由于QUIC ID是QUIC连接的唯一标识符，使用它进行负载均衡可以实现基于连接级别的负载分配。相同QUIC连接的请求会分发到同一台后端服务器。URL参数哈希：根据请求的URL参数进行哈希计算。相同URL参数的请求会分发到同一台后端服务器。例如...

开通消息队列服务并授权

如果您的账号为RAM用户，必须先为RAM用户进行授权，才能通过控制台或API访问相应的云消息队列 RocketMQ 版资源，并使用资源通过SDK收发消息。前提条件您已注册阿里云账号并完成实名认证。更多信息，请参见阿里云账号注册流程。步骤一：...

TCP协议客户端大版本发布

云消息队列 RocketMQ 版于2021年10月18日发布新版本Java SDK和C++ SDK客户端，本次发布对客户端大版本进行了升级。本文介绍发布的SDK版本信息、支持升级的地域以及主要的功能差异。SDK版本信息本次发布的SDK客户端版本信息如下：协议 ...

开通消息队列服务并授权

如果您的账号为RAM用户，必须先为RAM用户进行授权，才能通过控制台或API访问相应的云消息队列 RocketMQ 版资源，并使用资源通过SDK收发消息。前提条件您已注册阿里云账号并完成实名认证。更多信息，请参见阿里云账号注册流程。步骤一：...

RBAC授权

本文介绍如何在云消息队列 Confluent 版控制台中进行RBAC授权。背景信息 RBAC的全称是Role Based Access Control。RBAC的授权方式是基于角色进行授权的，而ACL是基于权限进行授权。因此，RBAC比ACL更适合批量授权以及权限回收。RBAC授权...

消息存储和清理机制

消息在队列中的存储情况如下：消息存储管理粒度说明云消息队列 RocketMQ 版按照服务端节点粒度管理存储时长而非队列或主题，原因如下：消息存储优势权衡：云消息队列 RocketMQ 版基于统一的物理日志队列和轻量化逻辑队列的二级组织方式...

使用ResourceQueue（资源队列）进行负载管理

新品推荐