消息队列 - RabbitMQ

消息队列 - RabbitMQ

    • 1. 初识 MQ
      • 1.1 同步调用
      • 1.2 异步调用
      • 1.3.技术选型
    • 2. RabbitMQ
      • 2.1 安装
      • 2.2 收发信息
        • 2.2.1 交换机(Exchange)
        • 2.2.2 队列
        • 2.2.3 绑定关系
        • 2.2.4 发送消息
      • 2.3 数据隔离

1. 初识 MQ

微服务一旦拆分,必然涉及到服务之间的相互调用,之前讲到的基于 OpenFeign 的调用。这种调用中,调用者发起请求后需要等待服务提供者执行业务返回结果后,才能继续执行后面的业务。也就是说调用者在调用过程中处于阻塞状态,因此我们称这种调用方式为同步调用,也可以叫同步通讯。但在很多场景下,我们可能需要采用异步通讯的方式,为什么呢?

两种方式的区别:

  • 同步通讯:就如同打视频电话,双方的交互都是实时的。因此同一时刻你只能跟一个人打视频电话。
  • 异步通讯:就如同发微信聊天,双方的交互不是实时的,你不需要立刻给对方回应。因此你可以多线操作,同时跟多人聊天。

两种方式各有优劣,打电话可以立即得到响应,但是你却不能跟多个人同时通话。发微信可以同时与多个人收发微信,但是往往响应会有延迟。

所以,如果我们的业务需要实时得到服务提供方的响应,则应该选择同步通讯(同步调用)。而如果我们追求更高的效率,并且不需要实时响应,则应该选择异步通讯(异步调用)。

1.1 同步调用

我们以注册成功后邮件通知为例

image-20231207225257184

同步调用的业务流程是:

  • 发送注册请求
  • 注册成功将信息存入数据库
  • 发送邮件通知
  • 返回成功信息

这样的业务流程会存在下面三个问题

一、性能低

由于同步调用,调用者需要等待服务提供者执行完返回结果后,才能继续向下执行,也就是说每次远程调用,调用者都是阻塞等待状态。最终整个业务的响应时长就是每次远程调用的执行时长之和:100+100+300+50 = 550ms

二、扩展性差

比如需要添加短信通知,需要在代码中添加短信服务的远程调用代码。

三、级联失效

在这个案例中,注册成功了,但是邮件通知服务出现了问题抛出了错误会让存入数据库的信息回滚导致整个注册业务失败。

需要解决这些问题就需要用异步调用的方式来代替同步调用

1.2 异步调用

异步调用方式其实就是基于消息通知的方式,一般包含三个角色:

  • 消息发送者:投递消息的人,就是原来的调用方
  • 消息Broker:管理、暂存、转发消息,你可以把它理解成微信服务器
  • 消息接收者:接收和处理消息的人,就是原来的服务提供方

image-20231207230036497

在异步调用中,发送者不再直接同步调用接收者的业务接口,而是发送一条消息投递给消息Broker。然后接收者根据自己的需求从消息Broker那里订阅消息。每当发送方发送消息后,接受者都能获取消息并处理。
这样,发送消息的人和接收消息的人就完全解耦了。

还是以注册通知为例:

image-20231207230635303

将远程调用逻辑删除,改为发送一条消息到Broker。而相关的微服务都可以订阅消息通知,一旦消息到达Broker,则会分发给每一个订阅了的微服务,处理各自的业务。

后续需要添加短信通知也只需要添加一个短信服务订阅消息即可。

而且注册服务的耗时也和其他服务无关。

综上,异步调用的优势包括:

  • 耦合度更低
  • 性能更好
  • 业务拓展性强
  • 故障隔离,避免级联失败

当然,异步通信也并非完美无缺,它存在下列缺点:

  • 完全依赖于Broker的可靠性、安全性和性能
  • 架构复杂,后期维护和调试麻烦

1.3.技术选型

消息Broker,目前常见的实现方案就是消息队列(MessageQueue),简称为MQ.
目比较常见的MQ实现:

  • ActiveMQ
  • RabbitMQ
  • RocketMQ
  • Kafka

几种常见MQ的对比:

RabbitMQActiveMQRocketMQKafka
公司/社区RabbitApache阿里Apache
开发语言ErlangJavaJavaScala&Java
协议支持AMQP,XMPP,SMTP,STOMPOpenWire,STOMP,REST,XMPP,AMQP自定义协议自定义协议
可用性一般
单机吞吐量一般非常高
消息延迟微秒级毫秒级毫秒级毫秒以内
消息可靠性一般一般

追求可用性:Kafka、 RocketMQ 、RabbitMQ
追求可靠性:RabbitMQ、RocketMQ
追求吞吐能力:RocketMQ、Kafka
追求消息低延迟:RabbitMQ、Kafka

2. RabbitMQ

RabbitMQ 是一个开源的消息中间件(Message Broker),用于在分布式系统中传递消息。它实现了高级消息队列协议(AMQP),这是一种网络协议,用于在应用程序之间传递消息。

以下是 RabbitMQ 的一些主要特性和概念:

  1. 消息队列: RabbitMQ 提供了一个消息队列,允许不同的应用程序通过消息进行通信。发送方将消息放入队列,而接收方则从队列中获取消息。
  2. 发布/订阅模型: RabbitMQ 支持发布/订阅模型,其中一个应用程序(发布者)发布消息,而多个应用程序(订阅者)可以订阅并接收这些消息。
  3. 可靠性: RabbitMQ 提供了持久性,确保即使在代理重新启动后,队列和消息也不会丢失。
  4. 灵活的路由: RabbitMQ 具有灵活的路由机制,可以根据不同的条件将消息路由到不同的队列。
  5. 多协议支持: RabbitMQ 支持多种消息传递协议,包括 AMQP、STOMP、MQTT 等。
  6. 插件系统: RabbitMQ 具有丰富的插件系统,可以通过插件扩展其功能,如集群、身份验证、可视化工具等。
  7. 可视化管理界面: RabbitMQ 提供了一个易于使用的管理界面,允许用户监视和管理队列、交换机等组件。
  8. 集群支持: RabbitMQ 支持构建集群,以提高可用性和性能。
  9. 消息确认: 客户端可以向 RabbitMQ 确认已成功处理消息,确保消息不会因为消费者故障而丢失。
  10. 死信队列: RabbitMQ 支持死信队列,用于处理无法被消费的消息。

2.1 安装

这里介绍 Docker 安装 RabbitMQ 的过程。

2.1.1 拉取镜像

docker pull rabbitmq:management #  拉取带有web界面的镜像

image-20231207210107857

2.1.2 启动容器

docker run -e RABBITMQ_DEFAULT_USER=root -e RABBITMQ_DEFAULT_PASS=root --name mq --hostname q -p 15672:15672 -p 5672:5672 -d rabbitmq:management
# -e RABBITMQ_DEFAULT_USER=root 用户名
# -e RABBITMQ_DEFAULT_PASS=root 密码

端口介绍:

  • 4369/tcp: Erlang Port Mapper Daemon (EPMD)端口,用于Erlang节点之间的通信。
  • 5671/tcp: AMQP over TLS/SSL端口,用于安全的AMQP连接。
  • 5672/tcp: 默认的AMQP端口,用于客户端连接和消息传递。
  • 15671/tcp: RabbitMQ Management插件的安全AMQP端口。
  • 25672/tcp: 集群端口,用于Erlang分布式节点之间的内部通信。
  • 15672/tcp: RabbitMQ Management插件的Web管理界面端口,通过Web界面进行RabbitMQ的管理。

image-20231207231928650

2.1.3 访问管理页面

http://ip地址:15672

image-20231207232019327

RabbitMQ对应的架构如图:

image-20231208134920751

其中包含几个角色:

  • publisher:生产者,也就是发送消息的一方
  • consumer:消费者,也就是消费消息的一方
  • queue:队列,存储消息。生产者投递的消息会暂存在消息队列中,等待消费者处理
  • exchange:交换机,负责消息路由。生产者发送的消息由交换机决定投递到哪个队列。
  • virtual host:虚拟主机,起到数据隔离的作用。每个虚拟主机相互独立,有各自的exchange、queue

2.2 收发信息

2.2.1 交换机(Exchange)

打开Exchanges选项,可以看到RabbitMQ预定义了7种交换机,这7种交换机有4种类型。
image-20231207232533500

关于交换机类型的简介:

  1. Direct Exchange(直连交换机):

    直连交换机是最简单的交换机类型。

    它将消息路由到与消息中的路由键完全匹配的队列中。

    在消息生产者指定的路由键和队列的绑定键完全相同时,消息将被发送到相应的队列。

  2. Fanout Exchange(扇出交换机):

    • 扇出交换机将消息广播到与交换机绑定的所有队列,忽略路由键。
    • 适用于广播消息给多个消费者的场景,不关心消息的具体内容。
  3. Topic Exchange(主题交换机):

    • 主题交换机通过匹配路由键和模式的方式来路由消息到队列。
    • 路由键可以包含通配符 *(匹配一个单词)和 #(匹配零个或多个单词),允许更复杂的路由规则。
  4. Headers Exchange(头交换机):

    • 头交换机使用消息的头部信息而不是路由键来决定如何路由消息。
    • 在绑定队列时指定一组键值对(headers),只有当消息的头部信息与这些键值对完全匹配时,消息才会被路由到队列。

关于预定义的7种交换机简介:

  1. AMQP default:
    • 这是一个直连交换机,是 RabbitMQ 的默认交换机。
    • 当消息的路由键与队列的绑定键完全匹配时,消息将被发送到相应的队列。
  2. amq.direct:
    • 也是一个直连交换机。
    • 类似于 AMQP 默认交换机,将消息路由到与消息中的路由键完全匹配的队列。
  3. amq.fanout:
    • 是一个扇出交换机。
    • 将消息广播到与交换机绑定的所有队列,忽略路由键。
  4. amq.headers:
    • 是一个头交换机。
    • 使用消息的头部信息而不是路由键来决定如何路由消息。在绑定队列时指定一组键值对(headers)。
  5. amq.match:
    • 是一个主题交换机。
    • 通过匹配路由键和模式的方式来路由消息到队列。支持更复杂的路由规则。
  6. amq.rabbitmq.trace:
    • 这是一个专用于消息追踪的交换机。
    • 用于在 RabbitMQ 中追踪消息的流动,通常不用于常规消息传递。
  7. amq.topic:
    • 也是一个主题交换机。
    • 通过匹配路由键和模式的方式来路由消息到队列。类似于 amq.match,支持更复杂的路由规则。
2.2.2 队列

打开Queues选项卡,新建一个队列:

image-20231208133420881

image-20231208133500631

2.2.3 绑定关系

点击 amq.fanout 交换机

image-20231208133656411

绑定队列 queue1

image-20231208133615746

image-20231208133641084

2.2.4 发送消息

点击 amq.fanout 交换机

image-20231208133925673

发送消息

image-20231208133915372

队列成功收到消息

image-20231208133941568

image-20231208133958825

2.3 数据隔离

RabbitMQ 使用 virtual host 实现数据隔离

新建一个虚拟主机

image-20231208140406859

添加一个用户

image-20231208140459340

现在用户test还没有能访问的虚拟主机

image-20231208140549326

切换登录用户test后无法获取没有访问权限的虚拟主机的队列消息。

image-20231208135723332

点击test为用户添加虚拟主机

image-20231208140634479

image-20231208140658453

右上角 虚拟主机切换为 /test 看不到其他虚拟主机的消息队列,这就是基于virtual host 的隔离效果。

image-20231208140741872

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/258158.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

FPGA入门有多难?这篇文章让你吃透零基础入门技巧!

FPGA是一个高度集成化的芯片,其学习过程既需要编程,又需要弄懂硬件电路和计算机架构。涉及到的知识和基础非常多,如果不合理地安排学习内容,学习过程会非常漫长和枯燥。这使很多想要学习FPGA小伙伴望而却步,那么&#…

VUE学习一、环境的安装

1.node.js安装 node.js是前端依赖的环境, 类似于java中的jdk 下载地址 node.js 下载 msi文件 下完就是一顿嘎嘎安装 , 安装后可以cmd看看node和npm的版本 1.2 yarn的安装 Yarn是Facebook最近发布的一款依赖包安装工具。Yarn是一个新的快速安全可信赖的可以替代NPM的依赖管…

OpenCL学习笔记(二)手动编译开发库(win10+vs2019)

前言 有时需求比较特别,可能需要重新编译opencl的sdk库。本文档简单记录下win10下,使用vs2019编译的过程,有需要的小伙伴可以参考下 一、获取源码 项目地址:GitHub - KhronosGroup/OpenCL-SDK: OpenCL SDK 可以直接使用git命令…

嵌入式总线技术学习(二):Modbus 总线技术详解

参考资料 工业控制网络 1. Modbus 概述 Modbus 是全球第一个真正用于工业现场的总线协议。为更好地普及和推动 Modbus 在基于以太网上的分布式应用,目前施耐德公司已将 Modbus 协议的所有权移交给 IDA (Interfacefor DistributedAutomation,分布式自动化…

EasyExcel如何实现复杂数据的导入

shigen日更文章的博客写手,擅长Java、python、vue、shell等编程语言和各种应用程序、脚本的开发。记录成长,分享认知,留住感动。 在我们常使用的系统中,难免会遇到数据导入的情况。其实导入做起来并不是很难,直接用到e…

注意力机制的快速学习

注意力机制的快速学习 注意力机制 将焦点聚焦在比较重要的事物上 我(查询对象Q),这张图(被查询对象V) 我看一张图,第一眼,就会判断那些东西对我而言比较重要,那些对于我不重要&…

Stable Diffusion XL on diffusers

Stable Diffusion XL on diffusers 翻译自:https://huggingface.co/docs/diffusers/using-diffusers/sdxl v0.24.0 非逐字翻译 Stable Diffusion XL (SDXL) 是一个强大的图像生成模型,其在上一代 Stable Diffusion 的基础上主要做了如下优化:…

最新版IDEA专业版大学生申请免费许可证教学(无需学校教育邮箱+官方途径+非破解手段)

文章目录 前言1. 申请学籍在线验证报告2. 进入IDEA官网进行认证3. 申请 JB (IDEA) 账号4. 打开 IDEA 专业版总结 前言 当你进入本篇文章时, 你应该是已经遇到了 IDEA 社区版无法解决的问题, 或是想进一步体验 IDEA 专业版的强大. 本文是一篇学生申请IDEA免费许可证的教学, 在学…

Android之Binder原理剖析

一:Binder的全面介绍 binder的出现 George Hoffman当时任Be公司的工程师,他启动了一个名为OpenBinder 的项目,在Be公司被ParmSource公司收购后, OpenBinder 由Dinnie Hackborn继续开发,后来成为管理ParmOS6 Cobalt O…

全景万店通打造掌上智慧生活助手,助力店铺全景引流

随着网络经济的崛起,新一代的消费群体的消费习惯逐渐变得富有个性化,因此他们对于传统的营销方式具有视觉疲劳,传统广告的效果也越发微小,但是请明显来代言,成本又十分高昂,那么还有什么引流好方法呢&#…

无人机高空巡查+智能视频监控技术,打造森林防火智慧方案

随着冬季的到来,森林防火的警钟再次敲响,由于森林面积广袤,地形复杂,且人员稀少,一旦发生火灾,人员无法及时发现,稍有疏忽就会酿成不可挽救的大祸。无人机高空巡查智能视频监控是一种非常有效的…

element-ui upload组件中将file文件数据转成二进制流数据格式

方法一 handleBeforeUpload (file)const reader new FileReader()reader.readAsArrayBuffer(file)reader.onload async function (theFile) {const binary new Blob([theFile.target.result]) // 转成二进制流数据 即binary数据格式}}方法二 const aBlob new Blob([file],…