分布队列双重总线问题处理与维修-分布队列双重总线问题处理与维修文档介绍内容-阿里云

什么是消息队列RabbitMQ版？

云消息队列 RabbitMQ 版兼容开源RabbitMQ客户端，解决开源各种稳定性痛点（例如消息堆积、脑裂等问题），同时具备高并发、分布式、灵活扩缩容等云消息服务优势。核心概念云消息队列 RabbitMQ 版的核心概念如下：生产者：发送消息的应用...

生产者负载均衡

生产者发送消息到云消息队列 RocketMQ 版服务端时，云消息队列 RocketMQ 版将根据生产者负载均衡策略将消息均匀的存储在多个队列中，避免产生热点队列和性能瓶颈。本文介绍云消息队列 RocketMQ 版生产者的负载均衡策略。背景信息了解...

消息收发计算规格费用

计算规格说明计算规格能力约束消息收发TPS 云消息队列 RocketMQ 版计算规格的大小，实际是云消息队列 RocketMQ 版处理消息收发的TPS上限。不同的规格对应不同的TPS上限，具体对应关系，请参见实例规格。其他资源配额每个实例规格除...

将云消息队列 Kafka 版接入阿里云Elasticsearch

随着时间的积累，云消息队列 Kafka 版中的日志数据会越来越多。当您需要查看并分析庞杂的日志数据时，可通过阿里云Logstash将云消息队列 Kafka 版中的日志数据导入阿里云Elasticsearch，然后通过Kibana进行可视化展示与分析。本文介绍将...

云消息队列 Kafka 版支持被审计的事件说明

云消息队列 Kafka 版已与操作审计服务集成，您可以在操作审计中查询操作云消息队列 Kafka 版产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。事件...

开源RabbitMQ迁移上云

在使用开源RabbitMQ集群时，当您希望能够解决各种稳定性痛点（例如消息堆积、脑裂等问题）、实现高并发、分布式、灵活扩缩容时，您可以将开源RabbitMQ集群迁移至云消息队列 RabbitMQ 版，本文介绍迁移上云的前提条件、操作步骤、注意事项...

事务消息

云消息队列 RocketMQ 版提供的分布式事务消息适用于所有对数据最终一致性有强需求的场景。本文介绍云消息队列 RocketMQ 版事务消息的概念、优势、典型场景、交互流程、使用规则以及示例代码。概念介绍事务消息：云消息队列 RocketMQ 版...

基本概念

本文介绍云消息队列 RocketMQ 版的基本概念，以便您更好地理解和使用云消息队列 RocketMQ 版。主题（Topic）云消息队列 RocketMQ 版中消息传输和存储的顶层容器，用于标识同一类业务逻辑的消息。主题通过TopicName来做唯一标识和区分。...

什么是云消息队列 Kafka 版？

云消息队列 Kafka 版是阿里云提供的分布式、高吞吐、可扩展的消息队列服务。云消息队列 Kafka 版广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，已成为大数据生态中不可或缺的部分。产品优势云消息队列 ...

基本概念

Apache Kafka 一款开源的分布式数据流处理平台，可以实时发布、订阅、存储和处理数据流。更多信息，请参见 Apache Kafka。云消息队列 Kafka 版一款由阿里云提供的Apache Kafka全托管服务，具备免部署、免运维、低成本、高弹性、高可靠、高...

消费者负载均衡

适用场景消息粒度消费负载均衡策略下，同一队列内的消息离散地分布于多个消费者，适用于绝大多数在线事件处理的场景。只需要基本的消息处理能力，对消息之间没有批量聚合的诉求。而对于流式处理、聚合计算场景，需要明确地对消息进行聚合...

配额与限制

云消息队列 RocketMQ 版对实例的资源配额、实例规格和相关参数进行了约束和规范，您在使用云消息队列 RocketMQ 版时不要超过对应的限制值，避免应用出现异常。参数限制以下参数中各资源的命名及备注等限制值不支持调整，请严格按照规范...

常见问题

本文汇总了使用云消息队列 Kafka 版实例时的常见问题。计费问题为什么购买了按量付费实例后不使用也要收费？为什么按流量峰值收费？按流量峰值收费的依据是什么？为什么额外增加分区要收费？我使用的Connector组件如何计费？客户端报错 ...

什么是云消息队列 Confluent 版？

本文介绍云消息队列 Confluent 版的定义。什么是Confluent Platform Confluent Platform是一个全面的数据流企业级平台，使您能够以连续、实时的流形式轻松访问、存储和管理数据。Confluent由Apache Kafka的原始创建者构建，通过企业级...

事务消息

事务消息为云消息队列 RocketMQ 版中的高级特性消息，本文为您介绍事务消息的应用场景、功能原理、使用限制、使用方法和使用建议。应用场景分布式事务的诉求分布式系统调用的特点为一个核心业务逻辑的执行，同时需要调用多个下游业务...

集成概述

依托事件总线EventBridge 强大的自研数据处理及灵活的函数计算自定义能力，提供7种匹配模式（指定值匹配、前缀匹配、后缀匹配、除外匹配、数值匹配、数组匹配、复杂组合逻辑匹配）、5种规则转换器（完整事件、部分事件、常量、模板转换器...

计费概述

本文介绍云消息队列 Kafka 版的计费方式，帮助您快速了解计费详情，按需选择计费方式。说明云消息队列 Kafka 版的Connector组件依赖于事件总线，云消息队列 Kafka 版不会额外收取费用。事件总线的计费说明，请参见计费说明。同时，...

消息轨迹

在分布式应用中，云消息队列 RocketMQ 版作为全链路中异步解耦的关键服务，提供的消息轨迹数据可有效将业务上下游信息串联起来，帮助您更好地排查异常信息，定位问题。本文介绍消息轨迹的使用场景、云消息队列 RocketMQ 版定义的轨迹参数...

Spring集成

云消息队列 RabbitMQ 版支持Spring框架的SDK，本文介绍如何集成Spring框架的SDK客户端收发消息。前提条件您已在云消息队列 RabbitMQ 版控制台创建实例、Vhost、Exchange、Queue等相关资源，具体操作，请参见步骤二：创建资源。安装...

什么是事件总线EventBridge

事件总线EventBridge 是阿里云提供的一款无服务器事件总线服务，支持阿里云服务、自定义应用、SaaS应用以标准化、中心化的方式接入，并能够以标准化的CloudEvents 1.0协议在这些应用之间路由事件，帮助您轻松构建松耦合、分布式的事件驱动...

通过EventBridge快速订阅ECS事件

步骤一：选用云服务专用事件总线云服务专用事件总线即default总线，是 EventBridge 默认创建的总线，阿里云上各个云产品会实时将产品内产生的事件，通过多种渠道实时投递到default总线，您可以在default总线上查找和订阅各个云产品的事件...

QueueHasDiffField

本文为您介绍云消息队列 RabbitMQ 版客户端报QueueHasDiffField类型错误的原因和处理方法。问题现象使用云消息队列 RabbitMQ 版客户端连接云消息队列 RabbitMQ 版服务端时，报QueueHasDiffField类型错误。例如QueueHasDiffField...

MQTT和RocketMQ进行数据互通（客户端上下线通知）

MQTT客户端的上下线事件将会触发MQTT服务端生成一条通知消息，云消息队列 MQTT 版支持将该条消息数据导出至其他阿里云产品，并使用MQTT的Java SDK实现MQTT客户端与后端应用收发消息。本文以当前仅支持的云消息队列 RocketMQ 版数据互通...

从自建MySQL同步至云消息队列 Kafka 版

通过数据传输服务DTS（Data Transmission Service），您可以将自建MySQL同步至云消息队列 Kafka 版，扩展消息处理能力。前提条件您已完成以下操作：自建MySQL数据库且数据库版本为5.1、5.5、5.6、5.7或8.0版本。购买并部署云消息队列 ...

ExchangeHasDiffFields

介绍云消息队列 RabbitMQ 版客户端报ExchangeHasDiffFields类型错误的原因和处理方法。问题现象使用云消息队列 RabbitMQ 版客户端连接云消息队列 RabbitMQ 版服务端时，报ExchangeHasDiffFields类型错误。例如ExchangeHasDiffFields...

自定义事件源消息服务MNS

前提条件消息服务MNS 开通消息服务MNS并授权创建队列事件总线EventBridge 开通事件总线EventBridge并授权创建自定义总线操作步骤登录事件总线EventBridge控制台。在左侧导航栏，单击事件总线。在顶部菜单栏，选择地域。在事件总线...

MQTT和RocketMQ进行数据互通（跨产品数据流入）

如果您的云端应用需要使用云消息队列 RocketMQ 版产品的某些功能，例如顺序消息特性、事务消息特性等，您可以通过消息流入或流出规则将云消息队列 MQTT 版和云消息队列 RocketMQ 版数据进行流转。本文介绍如何将云消息队列 RocketMQ...

基于事件流实现RocketMQ消息路由

本文介绍如何应用事件总线EventBridge 的事件流功能实现云消息队列 RocketMQ 版的消息路由。前提条件您已开通事件总线EventBridge并授权。您已购买并部署云消息队列 RocketMQ 版实例，且实例处于服务中状态。具体步骤，请参见 ...

使用Canal和RocketMQ实现数据库变更订阅处理

本文以MySQL数据库为例介绍如何使用Canal接入云消息队列 RocketMQ 版，实现MySQL数据库Binlog数据的变更处理。背景信息 CDC（Change Data Capture）是一种监测并捕获数据库变更的典型技术方案，常应用于异构数据源之间的数据同步。Canal...

消费者分类

云消息队列 RocketMQ 版支持PushConsumer和SimpleConsumer这两种类型的消费者，本文分别从使用方式、实现原理、可靠性重试和适用场景等方面为您介绍这两种类型的消费者。背景信息云消息队列 RocketMQ 版面向不同的业务场景提供了不同...

使用Canal和RocketMQ实现数据库变更订阅处理

本文以MySQL数据库为例介绍如何使用Canal接入云消息队列 RocketMQ 版，实现MySQL数据库Binlog数据的变更处理。背景信息 CDC（Change Data Capture）是一种监测并捕获数据库变更的典型技术方案，常应用于异构数据源之间的数据同步。Canal...

集群消费和广播消费

集群消费和广播消费是云消息队列 RocketMQ 版的基本消费模式，您可以在消费者客户端将消费模式设置为集群消费或者广播消费，用于控制同一条消息只能被集群内一个消费者消费到，还是会被集群内每个消费者都消费到。背景信息云消息队列 ...

基于事件流实现Kafka消息路由

本文介绍如何应用事件总线EventBridge 的事件流功能实现云消息队列 Kafka 版的消息路由。前提条件已开通事件总线EventBridge并授权。已购买并部署云消息队列 Kafka 版实例，且实例处于服务中状态。具体步骤，请参见购买和部署...

使用云消息队列 Kafka 版时出现消息堆积

使用云消息队列 Kafka 版时，可能会发现Group中出现消息堆积。本文介绍如何判断消息堆积是否属于正常情况，以及处理方法。客户端消费流程了解客户端消费流程，有助于理解消息是否堆积。一般情况下，客户端消费流程大致如下：判断消息...

消息服务MNS推送事件到函数计算

本文介绍如何通过事件总线EventBridge 将消息服务MNS队列的数据推送到函数计算。前提条件您已完成以下操作：事件总线EventBridge 开通事件总线EventBridge并授权创建自定义总线函数计算创建服务创建函数创建日志项目和日志仓库创建...

查看实例风险

消费流量 Group与Topic的订阅关系服务端小版本升级消费位点提交频率存在Rebalance的Group 消费客户端主动离开队列使用Sarama Go客户端操作步骤登录云消息队列 Kafka 版控制台，在概览页面的资源分布区域，选择地域。...

服务支持

本文汇总了云消息队列 RocketMQ 版的常见问题、产品动态与公告以及服务等级协议。云消息系列 RocketMQ 版常见问题产品功能常见问题客户端连接常见问题售卖、计费和实例升降配常见问题控制台常见问题消息发送常见问题消息消费常见...

概述

依托事件总线EventBridge 强大的自研数据处理及灵活的函数计算自定义能力，提供7种匹配模式（指定值匹配、前缀匹配、后缀匹配、除外匹配、数值匹配、数组匹配、复杂组合逻辑匹配）、5种规则转换器（完整事件、部分事件、常量、模板转换器...

概述

依托事件总线EventBridge 强大的自研数据处理及灵活的函数计算自定义能力，提供7种匹配模式（指定值匹配、前缀匹配、后缀匹配、除外匹配、数值匹配、数组匹配、复杂组合逻辑匹配）、5种规则转换器（完整事件、部分事件、常量、模板转换器...

管理事件规则

当发生与事件规则相匹配的事件时，事件会被路由到与事件规则关联的目标。事件规则可以与一个或多个目标关联。本文介绍如何在事件总线EventBridge 控制台管理事件规则，包括创建、查看和删除事件规则等操作。前提条件开通事件总线...

分布队列双重总线问题处理与维修

新品推荐