什么是云消息队列 Kafka 版?

云消息队列 Kafka 版 是阿里云提供的分布式、高吞吐、可扩展的消息队列服务。云消息队列 Kafka 版 广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域,已成为大数据生态中不可或缺的部分。产品优势 云消息队列 ...

Control Center基本使用

Control Center是 云消息队列 Confluent 版 的核心管理服务,提供了一个可视化的监控平台。本文介绍Control Center平台上的基本操作。登录Control Center 创建 云消息队列 Confluent 版 集群,详情请参见 购买和部署实例。在 云消息队列 ...

消息队列RabbitMQ版

amq.direct Queue 选择目标 云消息队列 RabbitMQ 版 实例中的队列。仅当 目标类型 参数配置为 Queue 模式 时需要配置该参数。queue Routing Key 路由消息规则。Body 需要投递的事件的消息内容。配置规则,请参见 消息转换。部分事件$.data....

基本概念

本文介绍 云消息队列 RocketMQ 版 的基本概念,以便您更好地理解和使用 云消息队列 RocketMQ 版。主题(Topic)云消息队列 RocketMQ 版 中消息传输和存储的顶层容器,用于标识同一类业务逻辑的消息。主题通过TopicName来做唯一标识和区分。...

使用Canal和RocketMQ实现数据库变更订阅处理

本文以MySQL数据库为例介绍如何使用Canal接入 云消息队列 RocketMQ 版,实现MySQL数据库Binlog数据的变更处理。背景信息 CDC(Change Data Capture)是一种监测并捕获数据库变更的典型技术方案,常应用于异构数据源之间的数据同步。Canal...

公共参数

公共请求头 参数 是否必选 说明 Authorization 是 验证字符串,由 MQ+空格+<AccessKeyId>+:+构成,更多信息,请参见 签名机制。Content-Length 是 HTTP请求Body的长度。Content-Type 是 请求内容的MIME类型,目前请求仅支持text/xml;...

使用Canal和RocketMQ实现数据库变更订阅处理

本文以MySQL数据库为例介绍如何使用Canal接入 云消息队列 RocketMQ 版,实现MySQL数据库Binlog数据的变更处理。背景信息 CDC(Change Data Capture)是一种监测并捕获数据库变更的典型技术方案,常应用于异构数据源之间的数据同步。Canal...

什么是云消息队列 Confluent 版?

本文介绍 云消息队列 Confluent 版 的定义。什么是Confluent Platform Confluent Platform是一个全面的数据流企业级平台,使您能够以连续、实时的流形式轻松访问、存储和管理数据。Confluent由Apache Kafka的原始创建者构建,通过企业级...

使用Canal将MySQL的数据同步至云消息队列 Kafka 版

本教程介绍如何使用Canal将MySQL的数据同步至 云消息队列 Kafka 版。背景信息 Canal的主要用途是基于MySQL数据库增量日志解析,提供增量数据订阅和消费。Canal伪装自己为MySQL Slave,向MySQL Master发送dump请求。MySQL Master收到dump...

迁移元数据上云

使用限制 由于RabbitMQ和 云消息队列 RabbitMQ 版 在权限管控机制等方面存在差异,rabbit_version、users、permissions、parameters、global_parameters 和 policies 元数据不支持导入 云消息队列 RabbitMQ 版 实例,在导入时会被自动忽略...

SendMessage-向云消息队列 MQTT 版发送单条消息

从服务端应用向云消息队列 MQTT 版发送单条消息。接口说明 SendMessage 接口为服务端应用调用,与 MQTT 客户端发送消息互补。服务端和客户端的使用场景区别,请参见 开发指南使用指引。调用 SendMessage 接口前,请确认您的云消息队列 MQTT...

消息轨迹

在分布式应用中,云消息队列 RocketMQ 版 作为全链路中异步解耦的关键服务,提供的消息轨迹数据可有效将业务上下游信息串联起来,帮助您更好地排查异常信息,定位问题。本文介绍消息轨迹的使用场景、云消息队列 RocketMQ 版 定义的轨迹参数...

实例限流最佳实践

云消息队列 RabbitMQ 版 会对单实例的TPS流量峰值进行限流,本文介绍 云消息队列 RabbitMQ 版 实例的限流规则、限流后的行为以及限流最佳实践等。限流后行为 当 云消息队列 RabbitMQ 版 实例的TPS流量峰值超过您所购买实例的TPS规格上限时...

创建RabbitMQ Sink Connector

exchange Queue 当 目标类型 为 Queue 时,选择 云消息队列 RabbitMQ 版 中的选择接收消息的队列。queue 消息路由规则(Routing Key)事件总线EventBridge 通过JSONPath提取事件中的数据,将指定的事件内容路由到事件目标。当 目标类型 为 ...

云消息队列 RabbitMQ 版

vhost Queue 选择源实例中的队列。queue 表 2.目标端云消息队列 RocketMQ 版参数配置 参数 说明 示例 地域 接收 云消息队列 RocketMQ 版 消息的目标实例所在的地域。华东1(杭州)版本 选择目标端 云消息队列 RocketMQ 版 实例的版本。...

应用场景

本文为您介绍 云消息队列 RocketMQ 版 的应用场景,以便您更好地判断如何在业务中使用 云消息队列 RocketMQ 版。例如,针对一家互联网电商企业,其业务涉及广泛,如注册、订单、库存、物流等;同时,也会涉及许多业务峰值时刻,如秒杀活动...

产品架构

本文介绍 云消息队列 RocketMQ 版 的系统部署架构,方便您更好地理解 云消息队列 RocketMQ 版 的高可用性。云消息队列 RocketMQ 版 在任何一个环境都是可扩展的,生产者必须是一个集群,消息服务器必须是一个集群,消费者也同样。集群级别...

创建RabbitMQ Source Connector

test Queue 选择存储消息的队列。test 批量推送 批量推送可帮您批量聚合多个事件,当 批量推送条数 和 批量推送间隔(单位:秒)两者条件达到其一时即会触发批量推送。例如:您设置的推送条数为100 条,间隔时间为15 s,在10 s内消息条数已...

顺序消息

如果是普通消息,订单A的消息可能会被轮询发送到不同的队列中,不同队列的消息将无法保持顺序,而顺序消息发送时 云消息队列 RocketMQ 版 支持将Sharding Key相同(例如同一订单号)的消息序路由到一个队列中。云消息队列 RocketMQ 版 服务...

删除队列消息

本文介绍如何删除某个队列的所有消息。您可以使用Java客户端库中 queuePurge 方法删除某个队列的所有消息。示例代码如下:channel.queuePurge("queue-name");

步骤二:创建资源

一个新的应用接入 云消息队列 RabbitMQ 版 服务端,您需要提前创建 云消息队列 RabbitMQ 版 的相关资源,包括创建 云消息队列 RabbitMQ 版 实例、创建Vhost、创建Exchange、创建Queue、绑定Exchange和Queue、创建用户名密码以及获取实例接...

消息队列RabbitMQ版

vhost Queue 选择源实例中的队列。queue 表 2.目标端消息队列RocketMQ版参数配置 参数 说明 示例 地域 接收 云消息队列 RocketMQ 版 消息的目标实例所在的地域。华东1(杭州)版本 选择目标端 云消息队列 RocketMQ 版 实例的版本。RocketMQ...

消费者分组(ConsumerGroup)

消费者分组管理尽量避免自动化机制 在 云消息队列 RocketMQ 版 架构中,消费分组属于状态管理类的逻辑资源,每个消费分组都会涉及关联的消费状态、堆积信息、可观测指标和监控采集数据。因此,生产环境需要严格管理消费者分组资源,请勿...

概述

您可获取社区版TCP协议的SDK,来访问阿里云 云消息队列 RocketMQ 版。重要 所有社区版的SDK均由Apache RocketMQ社区提供,您可获取源码自行编译,但不在阿里云RocketMQ的SLA范围。和社区版SDK相比,商业版的SDK提供了更加丰富的功能特性并...

签名机制

本文介绍签名的生成机制。背景信息 AccessKey ID和AccessKey Secret由阿里云官方颁发给访问者(可以通过阿里云管理控制台申请和管理),其中:AccessKey ID用于标识访问者的身份。AccessKey Secret用于加密签名字符串和服务器端验证签名...

企业铂金版生命周期管理

升降配影响 云消息队列 RocketMQ 版 控制台和实例中每个服务节点可能出现秒级闪断,客户端有自动重试机制,一般不会影响业务,但会有异常日志产生,可能会有消息延迟的现象。消息可能会有重复,建议做好消息幂等处理。具体操作,请参见 ...

QueryMqttTraceMessagePublish-查询消息发送轨迹

请求参数 名称 类型 必填 描述 示例值 MqttRegionId string 是 云消息队列 MQTT 版实例地域(Region)的 ID。请参见 服务接入点。cn-hangzhou InstanceId string 是 云消息队列 MQTT 版实例的 ID,一定要和客户端实际使用的实例 ID 匹配。...

发布者最佳实践

Batch机制,云消息队列 Kafka 版 Producer端主要通过两个参数进行控制:batch.size:发往每个分区(Partition)的消息缓存量(消息内容的字节数之和,不是条数)。达到设置的数值时,就会触发一次网络请求,然后Producer客户端把消息批量发...

消费者分类

云消息队列 RocketMQ 版 支持PushConsumer和SimpleConsumer这两种类型的消费者,本文分别从使用方式、实现原理、可靠性重试和适用场景等方面为您介绍这两种类型的消费者。背景信息 云消息队列 RocketMQ 版 面向不同的业务场景提供了不同...

获取离线MQTT消息

为了简化离线消息获取机制,云消息队列 MQTT 版 系统在客户端成功建立连接并通过权限校验后,会自动加载离线消息并下发到客户端。注意事项 客户端建立连接后,需要通过权限校验才能自动加载离线消息。例如,若您使用的是Token验证的方式,...

消息服务MNS

华东1(杭州)队列名称 选择源端 消息服务MNS 的队列。test 开启 Base64 编码 默认勾选此项。开启Base64编码,会帮助您将 消息服务MNS 的数据编码后投递至目标端。无 表 2.目标端云消息队列 RocketMQ 版参数配置 参数 说明 示例 地域 接收 ...

消息服务MNS

华东1(杭州)队列名称 选择源端 消息服务MNS 的队列。test 开启 Base64 编码 默认勾选此项。开启Base64编码,会帮助您将 消息服务MNS 的数据编码后投递至目标端。无 表 2.目标端云消息队列 RocketMQ 版参数配置 参数 说明 示例 地域 接收 ...

主题(Topic)

并且针对主题的所有约束和属性设置,最终也是通过主题内部的队列来实现。内部属性 主题名称 定义:主题的名称,用于标识主题,主题名称集群内全局唯一。取值:由用户创建主题时定义。约束:请参见 参数限制。队列列表 定义:队列作为主题的...

RegisterCaCertificate-注册CA证书

云消息队列 MQTT 版支持X.509证书认证,客户端可通过设备证书完成接入认证。CA证书用于为客户端签发设备证书,并验证设备证书的正确性,您需要先将申请的CA证书注册到云消息队列 MQTT 版的服务端上,才能用于认证设备证书。本接口用于将...

常见问题

本文汇总了使用 云消息队列 RocketMQ 版 时的常见问题。产品功能常见问题 云消息队列 RocketMQ 版5.0系列相比4.0系列实例有什么优势?云消息队列 RocketMQ 版5.0系列实例兼容哪些版本客户端?云消息队列 RocketMQ 版支持哪些语言客户端?云...

开源对比

云消息队列 RabbitMQ 版 是一款基于高可用分布式存储架构实现的AMQP 0-9-1协议的消息产品,能够兼容开源RabbitMQ客户端,与开源RabbitMQ相比,能够解决各种稳定性痛点(例如消息堆积、脑裂等问题),同时具备高并发、分布式、灵活扩缩容等...

获取离线MQTT消息

为了简化离线消息获取机制,云消息队列 MQTT 版 系统在客户端成功建立连接并通过权限校验后,会自动加载离线消息并下发到客户端。注意事项 客户端建立连接后,需要通过权限校验才能自动加载离线消息。例如,若您使用的是Token验证的方式,...

升级实例版本

为保证升级过程中业务不受影响,请确保客户端支持重连机制(默认支持)及对断开连接的异常处理。建议您先购买测试实例进行升级验证,再到生产实例进行操作。建议您在业务低峰期执行升级操作。升级大版本后请更新客户端版本,保持客户端和...

什么是云消息队列 MQTT 版

云消息队列 MQTT 版 是阿里云推出的一款面向移动互联网以及物联网领域的轻量级消息中间件。如果说传统的消息队列中间件一般应用于微服务之间,那么适用于物联网的 云消息队列 MQTT 版 则实现了端与云之间的消息传递和真正意义上的万物互联...

顺序消息

顺序消息为 云消息队列 RocketMQ 版 中的高级特性消息,本文为您介绍顺序消息的应用场景、功能原理、使用限制、使用方法和使用建议。应用场景 在有序事件处理、撮合交易、数据实时增量同步等场景下,异构系统间需要维持强一致的状态同步,...
共有187条 < 1 2 3 4 ... 187 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云消息队列 RocketMQ 版 云消息队列 Kafka 版 数据资源平台 机器翻译 全局事务服务 (文档停止维护) 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用